小小书童记录select

小记:

阻塞,非阻塞:进程/线程要访问的数据是否就绪,进程/线程是否需要等待;
同步,异步:访问数据的方式,同步需要主动读写数据,在读写数据的过程中还是会阻塞;异步只需要I/O操作完成的通知,并不主动读写数据,由操作系统内核完成数据的读写。

Select IO复用模型是上个世纪90年代的东西,受限于当时的计算机硬软件的限制,这种技术随着epoll的出现逐渐被取代,但它毕竟风光过。了解历史才能更好的展望未来,每一个有情怀的码农都不应该一味抬头看远方,时而低头凝视大地,不亦乐乎~

了解select之前,我们需要了解下位图(bitmap),bitmap其实就是将对象映射到具体的一个bit位上来,表示对象存在或者被标记。bitmap算法有节省内存和快速查询等特点,所以适合处理海量数据的排序和查询。这种古老而牛逼的技术在数据库,操作系统上都有很广泛的应用。好的,下面引入select中使用到bitmap算法的几个API函数,也是在使用select这种IO复用技术时经常使用到的。

int FD_ZERO(fd_set *fdset);    // 复位
int FD_CLR(int fd, fd_set *fdset);   // 清零
int FD_SET(int fd, fd_set *fd_set);   // 设置
int FD_ISSET(int fd, fd_set *fdset);  // 测试设置

这几个函数主要完成具体 fdfd_set rset 映射关系的处理。看下fd_set的存储结构:

#ifndef FD_SETSIZE
#define FD_SETSIZE  1024
#endif

#define NBBY    8       /* number of bits in a byte */
typedef long    fd_mask;
#define NFDBITS (sizeof (fd_mask) * NBBY)   /* bits per mask */
#define howmany(x,y)    (((x)+((y)-1))/(y))

typedef struct _types_fd_set {
    fd_mask fds_bits[howmany(FD_SETSIZE, NFDBITS)];
} _types_fd_set;

清楚的看到,一个long类型8个字节,这样fds_bits就有1024/64 = 16 即16个64bit的数组,每一个数组64bit。设置和清零这两个操作是位操作,很方便,自己写了一个BitMapGolang代码,这里也顺便贴出:

func (b *BitSet) Set(i uint) {
        ....
    b.set[i>>6] = b.set[i>>6] | (1 << (i & (64 - 1)))
}
func (b *BitSet) Clear(i uint) {
    ....
    b.set[i>>6] &^= 1 << (i & (64 - 1))
}

好了,知道fdset的存储结构和简单设置之后,可以看下selectIO模型中的另外一个API:

int select(int maxfdp, fd_set *readset, fd_set *writeset, fd_set *exceptset,struct timeval *timeout);

其中有两个参数需要说明下:

  1. 第一个参数是timeout, 它代表select超时时间。该值有三种状态:timeout == NULL 无条件等待。 select函数将返回 -1, erro设为 EINTR,表示被迫中断。timeout->tv_sec == 0 &&timeout->tv_usec == 0 不等待,直接返回。timeout->tv_sec != 0 || timeout->tv_usec != 0 等待指定的时间,select返回0表示在规定时间内没有fd读写或者异常事件发生。
struct timeval  {
        long tv_sec;   /*秒 */
        long tv_usec;  /*微秒 */   
}
  1. 第二个参数 maxfdp,这个是文件描述符fd的最大值加1。每次调用select之前都需要算出最大的fd,作为maxfd。

关于select的内核实现部分,网上有很多文章进行了详细的描述,这里就不再赘述。好的,这里还是不落俗套地提下select的缺点:<1> 描述符(FD)数量问题 。<2> IO效率随FD的增加而线性下降。select随FD的增加性能下降的问题, 在使用方式上可以感受到:用户态需要每次select之前复位所有fd,然后select之后还得遍历所有fd找到可读写或异常的fd。但至今没有对select做过benchmark

这里随便带上poll小弟:

int poll (struct pollfd *fds, unsigned int nfds, int timeout);

其中pollfd的数据结构:

struct pollfd {
    int fd; /* file descriptor */
    short events; /* requested events to watch */
    short revents; /* returned events witnessed */
};

poll方式并没有采用selectfdset方式,而是每一个fd都有一个自己的pollfd数据结构,里面存放除了fd外,还存放events事件类型,这样poll就没有fd个数的上限问题了,但它仍然需要遍历fds拿到可读写或异常的fd。这点跟select还是一样的。

好了,小小书童简单记录下,end~

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,080评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,422评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,630评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,554评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,662评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,856评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,014评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,752评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,212评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,541评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,687评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,347评论 4 331
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,973评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,777评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,006评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,406评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,576评论 2 349

推荐阅读更多精彩内容

  • 一、概述 I/O复用使得程序能同时监听多个文件描述符,这对提高程序的性能至关重要。 I/O复用虽然能同时监听多个文...
    saviochen阅读 1,046评论 0 4
  • 2016-03-06 流ioctl操作 之前提到过ioctl函数,它能做其他io函数不能处理的事情。流系统中继续采...
    千里山南阅读 655评论 0 0
  • 本文摘抄自linux基础编程 IO概念 Linux的内核将所有外部设备都可以看做一个文件来操作。那么我们对与外部设...
    lintong阅读 1,571评论 0 4
  • 串口操作 串口操作需要的头文件 #include /*标准输入输出定义*/ #include /*标准函数库定...
    旅行家John阅读 1,297评论 0 3
  • 一个工作日的下午,至少对别人而言是工作日。一个人躺在沙发上,心里突然空落落的。 我是沐小熙,刚从电话销售公司离职。...
    沐小熙阅读 284评论 0 0