apue 第三章 文件I/O

apue 第三章 文件I/O

文件描述符

  • 对于内核,所有打开的文件都通过文件描述符引用
  • STDIN_FILEOUT,STDOUT_FILEOUT,STDERR_FILEOUT,0,1,2是unix系统shell的标准文件描述符

文件偏移量 lseek

  • 每一个打开的文件都有一个相关的文件偏移量,文件的读写操作都是从偏移量开始的
  • lseek可以设置文件的偏移量,返回设置后的偏移量,如果文件描述符指向的是一个管道,网络套接字,不能设置偏移量返回-1
  • 返回当前文件偏移量,还可以检测当前文件描述符能否设置偏移量
#include "apue.h"
int 
main(void)
{
    if (lseek(STDIN_FILENO, 0, SEEK_CUR) == -1) 
        printf("cannot seek\n");
    else
        printf("seek OK \n");
    exit(0);
}
  • 如果设置的偏移量大于当前文件的长度,对文件的下一次写会加长文件,没有写的字节置为0, 形成一个 空洞,可能会引起磁盘使用的增加

IO效率

  • 进程关闭时,会关闭所打开的文件描述符
  • 大多数文件系统在读取文件会采取某种预读技术,试图读入比缓冲区更多的数据到内存中。所以读入某些大小缓冲区的数据消耗时间是差不多的。

文件共享 相关资料:p61

  • 内核使用3种数据结构表示打开文件,他们之间的关系决定了在文件共享时,一个文件对另外一个文件的影响

  1. 每个进程在进程表中都有一个进程表项,包含了一张进程打开文件的 文件描述表 包含了打开的 文件描述符标志 ,指向一个文件表项的 指针
  2. 内核为每个打开的文件维护了一张文件表( 文件表项 ) 包含了文件的 状态标志(读,写,等), 当前文件的 偏移量 ,指向该文件的 V节点表项 指针
  3. V节点 包含了文件信息和文件的操作函数指针,同时包含了 i节点(存储文件长度)

原子操作问题


  • 进程A B共同写一个文件,有2个文件表项,但是共享一个v节点。A调用lseek设置偏移量为1500,内核切换进程B,也设置1500偏移量,然后B调用wrtie写100字节数据,偏移量变为1600,i节点的文件长度更新为1600。此时A的文件偏移量还是1500,调用write写数据,就会把B的数据覆盖
  • 在这过程中,先定位到文件的尾端(lseek),然后写(write),使用的是2个不同的函数,在这2个函数调用之间内核可能会挂起进程,去执行另外一个进程。可以在打开文件的时候设置 O_APPEND 标志,每次写操作前,都将当期偏移量设置到文件的末尾
  • 原子操作 是指由多步执行的一个操作,则要么执行完所有操作,要么一步也不执行

dup dup2

  • dup 和 dup2可以复制一个文件描述符,文件描述符共享同一个文件表项,包括文件状态标志,当前文件偏移量。
  • dup2可以显示的指定文件描述符值

sync fsync

  • 向文件写入数据,数据会先写入缓冲区(页高速缓存),然后排入队列,依次写入磁盘,这种方式称为延迟写
  • sync 会将缓冲区的数据排入队列就结束,不等待写入磁盘,内核会有一个update定时调用sync,定时冲洗缓冲区
  • fsync 只对文件描述符fb的文件起作用,写磁盘结束才返回

fcntl

  • fcntl 可以改变或获取文件的描述符和状态标志,这在无法得到shell打开的文件名时很有用,只需要知道描述符,就修改属性
#include "apue.h"
#include <fcntl.h>

int
main(int argc, char *argv[])
{
    int     val;

    if (argc != 2)
        err_quit("usage: a.out <descriptor#>");

    if ((val = fcntl(atoi(argv[1]), F_GETFL, 0)) < 0)
        err_sys("fcntl error for fd %d", atoi(argv[1]));

    switch (val & O_ACCMODE) {
    case O_RDONLY:
        printf("read only");
        break;

    case O_WRONLY:
        printf("write only");
        break;

    case O_RDWR:
        printf("read write");
        break;

    default:
        err_dump("unknown access mode");
    }

    if (val & O_APPEND)
        printf(", append");
    if (val & O_NONBLOCK)
        printf(", nonblocking");
    if (val & O_SYNC)
        printf(", synchronous writes");

#if !defined(_POSIX_C_SOURCE) && defined(O_FSYNC) && (O_FSYNC != O_SYNC)
    if (val & O_FSYNC)
        printf(", synchronous writes");
#endif

    putchar('\n');
    exit(0);
}
  • 1:标准输入 2:标准输出 3:错误 5:shell <>:标识用文件描述符5打开数据
  • 在使用fctnl修改文件描述符或文件状态值时,需要先获得现在的标志值,然后按照期望修改
  • 通过使用fsync 或者改变文件状态标志位O_SYNC时可以获得 延迟写
out :
➜  lesson_3 ./a.out 0</dev/tty
read only
➜  lesson_3 ./a.out 1>temp.foo 
➜  lesson_3 cat temp.foo 
write only
➜  lesson_3 ./a.out 2 2>>temp.foo  
write only, append
➜  lesson_3 ./a.out 5 5<>temp.foo 
read write
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,332评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,508评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,812评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,607评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,728评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,919评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,071评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,802评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,256评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,576评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,712评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,389评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,032评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,798评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,026评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,473评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,606评论 2 350

推荐阅读更多精彩内容

  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,934评论 6 13
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,637评论 18 139
  • 文件描述符 所有打开的文件都通过文件描述符引用。操作(读写)该文件描述符就相当于操作该文件。文件描述符是一个非负的...
    Myth52125阅读 589评论 0 0
  • 又来到了一个老生常谈的问题,应用层软件开发的程序员要不要了解和深入学习操作系统呢? 今天就这个问题开始,来谈谈操...
    tangsl阅读 4,102评论 0 23
  • 卫生间作为人们日常洗漱的场所,在生活中起着至关重要的作用。卫生间的水电、吊顶、排水等设计,也直接影响着人们的生活质...
    极限为简阅读 635评论 0 0