从零开始UNIX环境高级编程(3):文件I/O

open 和 openat

函数原型

int open(const char *pathname, int flags);
int openat(int dirfd, const char *pathname, int flags);

open和openat区别

  • openat比open多一个dirfd((文件描述符)的参数,dirfd表示需要进行open操作目录的文件描述符
  • openat操作的文件路径为dirfd + pathname

示例代码

  • 使用open在当前路径下的file目录中创建文件test.txt
  • 使用open获得目录"/Users/zhanghuamao/unix/"文件描述符fd
  • 将fd作为参数传入openat,pathname为./text.txt,即在/Users/zhanghuamao/unix/路径下创建了文件text.txt
#include "../inc/apue.h"
#include <fcntl.h>

int main(int argc, char const *argv[])
{
    int fd = -1;

    if (open("./file/test.txt", O_CREAT) == -1)
    {
        printf("cretae file fail\\n");
    }

    if ((fd = open("/Users/zhanghuamao/unix/", O_RDONLY)) == -1)
    {
        err_sys("open dir fail\\n");
    }
    else
    {
        printf("fd = %d\\n", fd);
    }


    if (openat(fd, "./text.txt", O_CREAT, S_IRUSR | S_IWUSR | S_IXUSR) == -1)
    {
        err_sys("openat file fail");

    }

    return 0;
}

运行结果

zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./open_test 
fd = 4
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ls -l ./file
total 0
-rwx------  1 zhanghuamao  staff  0  1 22 20:31 test.txt
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ pwd
/Users/zhanghuamao/unix/code/chapter3
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ls -l ../..
total 0
drwxr-xr-x  4 zhanghuamao  staff  136  1 21 10:07 code
-rwx------  1 zhanghuamao  staff    0  1 22 20:30 text.txt

注:
由于Mac OS X中/usr/include目录的Operation not permitted问题,无法将apue.h复制到/usr/include,直接将apue.h放到inc目录进行include。

zhanghuamaodeMacBook-Pro:code zhanghuamao$ ls
chapter3    inc
zhanghuamaodeMacBook-Pro:code zhanghuamao$ ls -l inc/
total 24
-rw-r--r--@ 1 zhanghuamao  staff  4649  1 12 21:37 apue.h
-rw-r--r--@ 1 zhanghuamao  staff  2282  1 12 21:36 error.c

lseek

函数原型

off_t lseek(int fd, off_t offset, int whence);

说明

  • 参数

     SEEK_SET
            The offset is set to offset bytes.
    
     SEEK_CUR
            The offset is set to its current location plus offset bytes.
    
     SEEK_END
            The offset is set to the size of the file plus offset bytes.
    
  • 返回值
    返回当前文件的偏移量。拿到了偏移量,就可以从偏移量的位置,开始对文件进行读写。可以理解为在用记事本编辑文字时,鼠标点击到哪个位置,那这个位置就被设置为偏移量,我们就从鼠标光标的位置开始编辑。

使用lseek写入字符串到文件末尾 - 示例代码

#include "../inc/apue.h"
#include <fcntl.h>

int main(int argc, char const *argv[])
{
    int offset = -1;
    int fd = -1;
    char* file_path = "/Users/zhanghuamao/unix/code/chapter3/file/text.txt";

    if ((fd = open(file_path, O_RDWR)) == -1)
    {
        err_sys("open fail");
    }

    //SEEK_END: write from the end of file, SEEK_CUR:write from the begin of file
    offset = lseek(fd, 0, SEEK_END);
    printf("before write, offset = %d\\n", offset);

    if (write(fd, "12345", 5) == -1)
    {
        err_sys("write fail");
    }

    offset = lseek(fd, 0, SEEK_CUR);
    printf("after write, offset = %d\\n", offset);

    return 0;
}

运行结果

zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./lseek_test;cat ./file/text.txt 
before offset = 0
after write, offset = 5
12345zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./lseek_test;cat ./file/tex .txt 
before offset = 5
after write, offset = 10
1234512345zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ 

空洞文件 - 示例代码

  • 产生空洞文件的原因:文件偏移量可以大于文件的当前长度。
  • 创建空文件holefile.txt,往里面写入"abcde",然后设置文件偏移量为1000,再次写入"fghij"。
#include "../inc/apue.h"
#include <fcntl.h>


int main(int argc, char const *argv[])
{
    char buf1[] = "abcde";
    char buf2[] = "fghij";


    int offset = -1;
    int fd = -1;

    char* file_path = "/Users/zhanghuamao/unix/code/chapter3/file/holefile.txt";

    if ((fd = creat(file_path, FILE_MODE)) == -1)
    {
        err_sys("create fail");
    }

    if (write(fd, buf1, 5) == -1)
    {
        err_sys("write buf1 fail");
    }

    if (lseek(fd, 1000, SEEK_SET) == -1)
    {
        err_sys("lseek error");
    }

    if (write(fd, buf2, 5) == -1)
    {
        err_sys("write buf2 fail");
    }

    /* code */
    return 0;
}

运行结果

  • 使用od -c holefile.txt ,让文件内容以单字节八进制输出
zhanghuamaodeMacBook-Pro:file zhanghuamao$ ls
holefile.txt    text.txt
zhanghuamaodeMacBook-Pro:file zhanghuamao$ od -c holefile.txt 
0000000    a   b   c   d   e  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0
0000020   \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0  \0
*
0001740   \0  \0  \0  \0  \0  \0  \0  \0   f   g   h   i   j            
0001755

对标准输入设置偏移量 - 示例代码

#include "../inc/apue.h"

#define BUFFSIZE 4096

int main(int argc, char const *argv[])
{
    char buf[BUFFSIZE];

    if (lseek(STDIN_FILENO, 0, SEEK_CUR) == -1)
    {
        printf("can't seek\\n");
        return 0;
    }
    else
    {
        printf("seek ok\\n");

    }

    while (read(STDIN_FILENO, buf , BUFFSIZE) > 0)
    {
        printf("%s", buf);

    }
    printf("\\n");
    return 0;

}

运行结果

  • 默认运行结果
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./stdin_lseek < ./file/text.txt 
seek ok
1234512345
  • 将lseek(STDIN_FILENO, 0, SEEK_CUR)修改为lseek(STDIN_FILENO, 2, SEEK_CUR)
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./stdin_lseek < ./file/text.txt 
seek ok
34512345

文件共享

内核表示打开文件的3种数据结构

内核表示打开文件的3种数据结构

原子操作

多进程同时操作同一文件导致的错误

  • 假设同时有两个独立的进程A和进程B都对同一文件进行最加写的操作。

      if (lseek(fd, 0, SEEK_END) == -1)
          err_sys("can't seek");
      if (write(fd, buf, 100) == -1)
          err_sys("write fail")
    
  • A进程先调用lseek将当前的文件偏移量设置为1500字节(当前文件末尾处)。然后内核切换进程,进程B调用lseek将当前的文件偏移量设置为1500字节。


    进程A和进程B都对同一文件进行最加写的操作
  • 进程B调用write写了100字节到文件末尾,B的文件偏移量更新为1600字节。同时,当前文件长度变为1600字节。

  • 内核又切换到进程A,进程A调用write,由于进程A的文件偏移量为1500字节,进程A从1500字节开始写入数据,覆盖调进程B写入的数据。

进程A覆盖调进程B写入的内容
  • Unix提供原子操作方法解决该问题,即在打开文件时,设置O_APPEND标志。使内核每次在写操作之前,都会将当前进程偏移量设置到该文件的末尾,这样在每次写之前,不用再调用lseek函数。
打开文件时设置设置O_APPEND标志

原子操作

所谓原子操作,指的是多步操作组合成为一步,在整个执行过程中,要么执行完所有操作,要么一步都不执行。例如,写入内容到文件末尾的原子操作,是将移动文件偏移量到末尾和写操作组合成为一步。要么两个操作一起执行,要么都不执行,这样就能避免多进程同时操作同一文件的错误。

dup

复制标准输入的文件描述符

#include "../inc/apue.h"
#include <fcntl.h>

int main(int argc, char const *argv[])
{
    int fd = -1;
    char buf[5];
    if ((fd = dup(1)) == -1)
    {
        err_sys("dup fail");
    }
    printf("dup fd = %d\n", fd);

    read(fd, buf, 5);
    printf("buf = %s\n", buf);

    return 0;
}

运行结果

在打印出dup fd = 3后,表示复制成功。然后手动输入"12345",打印成功。

zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./dup_test 
dup fd = 3
12345
buf = 12345

fcntl

函数原型

int fcntl(int fd, int cmd, ... /* arg */ );

获取文件状态标志 - 实例

#include "../inc/apue.h"
#include <fcntl.h>

int main(int argc, char const *argv[])
{
    int val;

    if (argc != 2)
    {
        err_sys("usage: fcntl_test <descriptor#>");
    }

    if ((val = fcntl(atoi(argv[1]), F_GETFL, 0)) < 0)
    {
        err_sys("fcntl error for fd %d\n", atoi(argv[1]));
    }

    switch (val & O_ACCMODE)
    {
    case O_RDONLY:
        printf("read only");
        break;
    case O_WRONLY:
        printf("write only");
        break;
    case O_RDWR:
        printf("read write");
        break;
    default:
        err_dump("unknow access mode");
    }

    if (val & O_APPEND)
    {
        printf(", append");
    }

    if (val & O_NONBLOCK)
    {
        printf(", nonblocking");
    }

    if (val & O_SYNC)
    {
        printf(", synchronous writes");
    }

    putchar('\n');
    return 0;

}

运行结果

zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./fcntl_test 0 < /dev/tty
read only
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./fcntl_test 1 > temp.txt
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ cat temp.txt 
write only
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./fcntl_test 2 2>> temp.txt
write only, append
zhanghuamaodeMacBook-Pro:chapter3 zhanghuamao$ ./fcntl_test 5 5<> temp.txt
read write

参考

  • UNIX 环境高级编程 第3版
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,864评论 6 494
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,175评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 159,401评论 0 349
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,170评论 1 286
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,276评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,364评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,401评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,179评论 0 269
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,604评论 1 306
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,902评论 2 328
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,070评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,751评论 4 337
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,380评论 3 319
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,077评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,312评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,924评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,957评论 2 351

推荐阅读更多精彩内容

  • 1.文件描述符 所有执行I/O操作的系统调用都以文件描述符(一个非负整数)来指代打开的文件。文件描述符用以表示所有...
    666真666阅读 1,086评论 0 2
  • 文件描述符 非负整数,变化范围(0~OPEN_MAX-1,或许是63?) 取得描述符 #include<fcntl...
    WhiteBlue阅读 432评论 0 0
  • 文件描述符 所有打开的文件都通过文件描述符引用。操作(读写)该文件描述符就相当于操作该文件。文件描述符是一个非负的...
    Myth52125阅读 591评论 0 0
  • https://nodejs.org/api/documentation.html 工具模块 Assert 测试 ...
    KeKeMars阅读 6,318评论 0 6
  • 霓虹闪烁 那颗跳动地呼吸 倾听 夜的沉寂 风 吹皱了涟漪 带走着飘落了一地的 柔情芬芳 路很短 却看不见 一个像丁...
    抱一阅读 223评论 0 2