fcntl使用及FD_CLOEXEC详解

ゝ一世哀愁。 2022-06-01 10:54 298阅读 0赞

fcntl使用说明  
转自 http://www.cppblog.com/mysileng/archive/2013/01/15/197279.aspx

功能描述：根据文件描述词来操作文件的特性。

\#include <unistd.h>  
\#include <fcntl.h>   
int fcntl(int fd, int cmd);   
int fcntl(int fd, int cmd, long arg);   
int fcntl(int fd, int cmd, struct flock \*lock);

\[描述\]  
fcntl()针对(文件)描述符提供控制。参数fd是被参数cmd操作(如下面的描述)的描述符。针对cmd的值，fcntl能够接受第三个参数int arg。

\[返回值\]  
fcntl()的返回值与命令有关。如果出错，所有命令都返回－1，如果成功则返回某个其他值。下列三个命令有特定返回值：F\_DUPFD , F\_GETFD , F\_GETFL以及F\_GETOWN。  
    F\_DUPFD   返回新的文件描述符  
    F\_GETFD   返回相应标志  
    F\_GETFL , F\_GETOWN   返回一个正的进程ID或负的进程组ID

fcntl函数有5种功能：   
1. 复制一个现有的描述符(cmd=F\_DUPFD).   
2. 获得／设置文件描述符标记(cmd=F\_GETFD或F\_SETFD).   
3. 获得／设置文件状态标记(cmd=F\_GETFL或F\_SETFL).   
4. 获得／设置异步I/O所有权(cmd=F\_GETOWN或F\_SETOWN).   
5. 获得／设置记录锁(cmd=F\_GETLK , F\_SETLK或F\_SETLKW).

**1. cmd值的F\_DUPFD ：**   
F\_DUPFD    返回一个如下描述的(文件)描述符：  
        ·最小的大于或等于arg的一个可用的描述符  
        ·与原始操作符一样的某对象的引用  
        ·如果对象是文件(file)的话，则返回一个新的描述符，这个描述符与arg共享相同的偏移量(offset)  
        ·相同的访问模式(读，写或读/写)  
        ·相同的文件状态标志(如：两个文件描述符共享相同的状态标志)  
        ·与新的文件描述符结合在一起的close-on-exec标志被设置成交叉式访问execve(2)的系统调用

实际上调用dup(oldfd)；  
等效于  
        fcntl(oldfd, F\_DUPFD, 0);

而调用dup2(oldfd, newfd)；  
等效于  
        close(oldfd)；  
        fcntl(oldfd, F\_DUPFD, newfd)；

**2. cmd值的F\_GETFD和F\_SETFD：**        
F\_GETFD    取得与文件描述符fd联合的close-on-exec标志，类似FD\_CLOEXEC。如果返回值和FD\_CLOEXEC进行与运算结果是0的话，文件保持交叉式访问exec()，否则如果通过exec运行的话，文件将被关闭(arg 被忽略)          
F\_SETFD    设置close-on-exec标志，该标志以参数arg的FD\_CLOEXEC位决定，应当了解很多现存的涉及文件描述符标志的程序并不使用常数 FD\_CLOEXEC，而是将此标志设置为0(系统默认，在exec时不关闭)或1(在exec时关闭)

在修改文件描述符标志或文件状态标志时必须谨慎，先要取得现在的标志值，然后按照希望修改它，最后设置新标志值。不能只是执行F\_SETFD或F\_SETFL命令，这样会关闭以前设置的标志位。

**3. cmd值的F\_GETFL和F\_SETFL：**     
F\_GETFL    取得fd的文件状态标志，如同下面的描述一样(arg被忽略)，在说明open函数时，已说明  
了文件状态标志。不幸的是，三个存取方式标志 (O\_RDONLY , O\_WRONLY , 以及O\_RDWR)并不各占1位。(这三种标志的值各是0 , 1和2，由于历史原因，这三种值互斥 — 一个文件只能有这三种值之一。) 因此首先必须用屏蔽字O\_ACCMODE相与取得存取方式位，然后将结果与这三种值相比较。         
F\_SETFL    设置给arg描述符状态标志，可以更改的几个标志是：O\_APPEND，O\_NONBLOCK，O\_SYNC 和 O\_ASYNC。而fcntl的文件状态标志总共有7个：O\_RDONLY , O\_WRONLY , O\_RDWR , O\_APPEND , O\_NONBLOCK , O\_SYNC和O\_ASYNC

可更改的几个标志如下面的描述：  
    O\_NONBLOCK   非阻塞I/O，如果read(2)调用没有可读取的数据，或者如果write(2)操作将阻塞，则read或write调用将返回-1和EAGAIN错误  
    O\_APPEND     强制每次写(write)操作都添加在文件大的末尾，相当于open(2)的O\_APPEND标志  
    O\_DIRECT     最小化或去掉reading和writing的缓存影响。系统将企图避免缓存你的读或写的数据。如果不能够避免缓存，那么它将最小化已经被缓存了的数据造成的影响。如果这个标志用的不够好，将大大的降低性能  
    O\_ASYNC      当I/O可用的时候，允许SIGIO信号发送到进程组，例如：当有数据可以读的时候

转载自：http: // blog.163.com/xychenbaihu@yeah/blog/static/132229655201010265577965/   
1、获取文件的flags，即open函数的第二个参数:  
       flags = fcntl(fd,F\_GETFL,0);  
  
2、设置文件的flags:  
  
      fcntl(fd,F\_SETFL,flags);  
  
3、增加文件的某个flags，比如文件是阻塞的，想设置成 非阻塞:  
  
       flags = fcntl(fd,F\_GETFL,0);  
  
       flags |= O\_NONBLOCK;  
  
      fcntl(fd,F\_SETFL,flags);  
  
4、取消文件的某个flags，比如文件是非阻塞的，想设置 成为阻塞:  
  
      flags = fcntl(fd,F\_GETFL,0);  
  
      flags &= ~O\_NONBLOCK;  
  
      fcntl(fd,F\_SETFL,flags);  
  
   
  
获取和设置文件flags举例::  
  
\#include <stdio.h>  
\#include <stdlib.h>  
\#include <unistd.h>  
\#include <fcntl.h>  
\#include <error.h>  
  
char buf\[500000\];  
  
int main( int argc, char \*argv\[\])  
\{  
         int ntowrite,nwrite;  
         const  char \*ptr ;  
         int flags;  
      
        ntowrite = read(STDIN\_FILENO,buf, sizeof(buf));  
         if(ntowrite <0)   
        \{     
                perror("read STDIN\_FILENO fail:");  
                exit(1);  
        \}     
        fprintf(stderr,"read %d bytes\\n",ntowrite);  
      
         if((flags = fcntl(STDOUT\_FILENO,F\_GETFL,0))==-1)  
        \{     
                perror("fcntl F\_GETFL fail:");  
                exit(1);  
        \}     
        flags |= O\_NONBLOCK;  
         if(fcntl(STDOUT\_FILENO,F\_SETFL,flags)==-1)  
        \{     
                perror("fcntl F\_SETFL fail:");  
                exit(1);  
        \}     
      
        ptr = buf;  
         while(ntowrite > 0)  
        \{     
                nwrite = write(STDOUT\_FILENO,ptr,ntowrite);  
                 if(nwrite == -1)   
                \{    
  
                        perror("write file fail:");  
                \}     
                 if(nwrite > 0)  
                \{     
                        ptr += nwrite;  
                        ntowrite -= nwrite;  
                \}     
        \}     
      
        flags &= ~O\_NONBLOCK;  
         if(fcntl(STDOUT\_FILENO,F\_SETFL,flags)==-1)  
        \{     
                perror("fcntl F\_SETFL fail2:");  
        \}     
         return 0;  
\}

**4. cmd值的F\_GETOWN和F\_SETOWN：**     
F\_GETOWN   取得当前正在接收SIGIO或者SIGURG信号的进程id或进程组id，进程组id返回的是负值(arg被忽略)       
F\_SETOWN   设置将接收SIGIO和SIGURG信号的进程id或进程组id，进程组id通过提供负值的arg来说明(arg绝对值的一个进程组ID)，否则arg将被认为是进程id

** 5. cmd值的F\_GETLK, F\_SETLK或F\_SETLKW：** 获得／设置记录锁的功能，成功则返回0，若有错误则返回-1，错误原因存于errno。  
F\_GETLK    通过第三个参数arg(一个指向flock的结构体)取得第一个阻塞lock description指向的锁。取得的信息将覆盖传到fcntl()的flock结构的信息。如果没有发现能够阻止本次锁(flock)生成的锁，这个结构将不被改变，除非锁的类型被设置成F\_UNLCK      
F\_SETLK    按照指向结构体flock的指针的第三个参数arg所描述的锁的信息设置或者清除一个文件的segment锁。F\_SETLK被用来实现共享(或读)锁(F\_RDLCK)或独占(写)锁(F\_WRLCK)，同样可以去掉这两种锁(F\_UNLCK)。如果共享锁或独占锁不能被设置，fcntl()将立即返回EAGAIN       
F\_SETLKW   除了共享锁或独占锁被其他的锁阻塞这种情况外，这个命令和F\_SETLK是一样的。如果共享锁或独占锁被其他的锁阻塞，进程将等待直到这个请求能够完成。当fcntl()正在等待文件的某个区域的时候捕捉到一个信号，如果这个信号没有被指定SA\_RESTART, fcntl将被中断

当一个共享锁被set到一个文件的某段的时候，其他的进程可以set共享锁到这个段或这个段的一部分。共享锁阻止任何其他进程set独占锁到这段保护区域的任何部分。如果文件描述符没有以读的访问方式打开的话，共享锁的设置请求会失败。

独占锁阻止任何其他的进程在这段保护区域任何位置设置共享锁或独占锁。如果文件描述符不是以写的访问方式打开的话，独占锁的请求会失败。

结构体flock的指针：  
struct flcok   
\{   
short int l\_type; /\* 锁定的状态\*/

//以下的三个参数用于分段对文件加锁，若对整个文件加锁，则：l\_whence=SEEK\_SET, l\_start=0, l\_len=0  
short int l\_whence; /\*决定l\_start位置\*/   
off\_t l\_start; /\*锁定区域的开头位置\*/   
off\_t l\_len; /\*锁定区域的大小\*/

pid\_t l\_pid; /\*锁定动作的进程\*/   
\};

l\_type 有三种状态：   
F\_RDLCK   建立一个供读取用的锁定   
F\_WRLCK   建立一个供写入用的锁定   
F\_UNLCK   删除之前建立的锁定

l\_whence 也有三种方式：   
SEEK\_SET   以文件开头为锁定的起始位置   
SEEK\_CUR   以目前文件读写位置为锁定的起始位置   
SEEK\_END   以文件结尾为锁定的起始位置

fcntl文件锁有两种类型：建议性锁和强制性锁  
建议性锁是这样规定的：每个使用上锁文件的进程都要检查是否有锁存在，当然还得尊重已有的锁。内核和系统总体上都坚持不使用建议性锁，它们依靠程序员遵守这个规定。  
强制性锁是由内核执行的：当文件被上锁来进行写入操作时，在锁定该文件的进程释放该锁之前，内核会阻止任何对该文件的读或写访问，每次读或写访问都得检查锁是否存在。

系统默认fcntl都是建议性锁，强制性锁是非POSIX标准的。如果要使用强制性锁，要使整个系统可以使用强制性锁，那么得需要重新挂载文件系统，mount使用参数 -0 mand 打开强制性锁，或者关闭已加锁文件的组执行权限并且打开该文件的set-GID权限位。  
建议性锁只在cooperating processes之间才有用。对cooperating process的理解是最重要的，它指的是会影响其它进程的进程或被别的进程所影响的进程，举两个例子：  
(1) 我们可以同时在两个窗口中运行同一个命令，对同一个文件进行操作，那么这两个进程就是cooperating  processes  
(2) cat file | sort，那么cat和sort产生的进程就是使用了pipe的cooperating processes

使用fcntl文件锁进行I/O操作必须小心：进程在开始任何I/O操作前如何去处理锁，在对文件解锁前如何完成所有的操作，是必须考虑的。如果在设置锁之前打开文件，或者读取该锁之后关闭文件，另一个进程就可能在上锁/解锁操作和打开/关闭操作之间的几分之一秒内访问该文件。当一个进程对文件加锁后，无论它是否释放所加的锁，只要文件关闭，内核都会自动释放加在文件上的建议性锁(这也是建议性锁和强制性锁的最大区别)，所以不要想设置建议性锁来达到永久不让别的进程访问文件的目的(强制性锁才可以)；强制性锁则对所有进程起作用。

fcntl使用三个参数 F\_SETLK/F\_SETLKW， F\_UNLCK和F\_GETLK 来分别要求、释放、测试record locks。record locks是对文件一部分而不是整个文件的锁，这种细致的控制使得进程更好地协作以共享文件资源。fcntl能够用于读取锁和写入锁，read lock也叫shared lock(共享锁)， 因为多个cooperating process能够在文件的同一部分建立读取锁；write lock被称为exclusive lock(排斥锁)，因为任何时刻只能有一个cooperating process在文件的某部分上建立写入锁。如果cooperating processes对文件进行操作，那么它们可以同时对文件加read lock，在一个cooperating process加write lock之前，必须释放别的cooperating process加在该文件的read lock和wrtie lock，也就是说，对于文件只能有一个write lock存在，read lock和wrtie lock不能共存。

FD\_CLOEXEC详解：  
转自 http://blog.csdn.net/chrisniu1984/article/details/7050663

我们经常会碰到需要fork子进程的情况，而且子进程很可能会继续exec新的程序。这就不得不提到子进程中无用文件描述符的问题！

fork函数的使用本不是这里讨论的话题，但必须提一下的是：子进程以写时复制（COW，Copy-On-Write）方式获得父进程的数据空间、堆和栈副本，这其中也包括文件描述符。刚刚fork成功时，父子进程中相同的文件描述符指向系统文件表中的同一项（这也意味着他们共享同一文件偏移量）。

![0_1323397034QXKk.gif][]

接着，一般我们会调用exec执行另一个程序，此时会用全新的程序替换子进程的正文，数据，堆和栈等。此时保存文件描述符的变量当然也不存在了，我们就无法关闭无用的文件描述符了。所以通常我们会fork子进程后在子进程中直接执行close关掉无用的文件描述符，然后再执行exec。

但是在复杂系统中，有时我们fork子进程时已经不知道打开了多少个文件描述符（包括socket句柄等），这此时进行逐一清理确实有很大难度。我们期望的是能在fork子进程前打开某个文件句柄时就指定好：“这个句柄我在fork子进程后执行exec时就关闭”。其实时有这样的方法的：即所谓的 close-on-exec。

close-on-exec的实现只需要调用系统的fcntl就能实现，很简单几句代码就能实现：

**\[cpp\]**  [view plain][] [copy][view plain]

1.  **int** fd=open("foo.txt",O\_RDONLY);  
2.  **int** flags = fcntl(fd, F\_GETFD);  
3.  flags |= FD\_CLOEXEC;  
4.  fcntl(fd, F\_SETFD, flags);

这样，当fork子进程后，仍然可以使用fd。但执行exec后系统就会自动关闭子进程中的fd了。

\-------------------------------------------------------- 分割线 ------------------------------------------------------------------------------------

最近好好看了一下open函数，其中flags参数可以传入O\_CLOEXEC标记 **\[注意：linux 2.6.23才开始支持此标记\]**

这样就可以一步实现上面的提到的close-on-exec的效果。

[0_1323397034QXKk.gif]: /images/20220601/57470707bca548e8924c15a5483ecc68.png
[view plain]: http://blog.csdn.net/chrisniu1984/article/details/7050663#