管道指的是从一个进程连接数据流到另一个进程。它具有以下特点:

管道是半双工的,数据只能向一个方向流动;需要双方通信时,需要建立起两个管道;

只能用于父子进程或者兄弟进程之间(具有亲缘关系的进程);

单独构成一种独立的文件系统:管道对于管道两端的进程而言,就是一个文件,但它不是普通的文件,它不属于某种文件系统,而是自立门户,单独构成一种文件系统,并且只存在与内存中。

数据的读出和写入:一个进程向管道中写的内容被管道另一端的进程读出。写入的内容每次都添加在管道缓冲区的末尾,并且每次都是从缓冲区的头部读出数据。

本文详细介绍管道相关信息。

管道

基于标准库popen和pclose的进程管道

#include

FILE *popen(const char *command, const char *type);

int pclose(FILE *stream);

popen允许一个程序将另一个程序作为新进程启动。并可以传递数据给它或者通过它接受数据。type仅能为"r"和“w”两种。当type="r"时,调用程序可以通过FILE文件流指针从被调用程序的输出获得数据;当type="w"时,调用程序可以通过fwrite函数向被调用程序发送数据。popen函数不支持任何其他选项。当popen启动的进程结束后,需要利用pclose关闭与之关联的文件流。如果在调用pclose时候,进程还在运行,那么pclose将会阻塞等待进程结束再返回。

static void check_image(char * imagename)

{

FILE * fp;

char command[120];

char buf[200];

bool ret;

sprintf(command, "cksum %s", imagename);

fp = popen(command, "r");

if(fp == NULL) return;

fgets(buf, 200, fp);

fprintf(stdout, "Check Image: %s... Done\n", buf);

fclose(fp);

return;

}

基于系统调用pipe的进程管道

#include

int pipe(int pipefd[2]);

利用pipe创建的管道包含两个文件描述符fd[0]以及fd[1],需要注意的是,该处是文件描述符而不是文件流,对该文件描述符进行读写必须采用read和write系统调用,管道的两端是固定了任务的。即一端只能用于读,由描述字fd[0]表示,称其为管道读端;另一端则只能用于写,由描述字fd[1]来表示,称其为管道写端。如果试图从管道写端读取数据,或者向管道读端写入数据都将导致错误发生。结构如下图:

从管道中读取数据:

如果管道的写端不存在,则认为已经读到了数据的末尾,读函数返回的读出字节数为0;

当管道的写端存在时,如果请求的字节数目大于PIPE_BUF,则返回管道中现有的数据字节数,如果请求的字节数目不大于PIPE_BUF,则返回管道中现有数据字节数(此时,管道中数据量小于请求的数据量);或者返回请求的字节数(此时,管道中数据量不小于请求的数据量)。

向管道中写入数据:

向管道中写入数据时,linux将不保证写入的原子性,管道缓冲区一有空闲区域,写进程就会试图向管道写入数据。如果读进程不读走管道缓冲区中的数据,那么写操作将一直阻塞。

注:只有在管道的读端存在时,向管道中写入数据才有意义。否则,向管道中写入数据的进程将收到内核传来的SIFPIPE信号,应用程序可以处理该信号,也可以忽略(默认动作则是应用程序终止)。

管道的主要局限性正体现在它的特点上:

只支持单向数据流;

只能用于具有亲缘关系的进程之间;

没有名字;

管道的缓冲区是有限的(管道制存在于内存中,在管道创建时,为缓冲区分配一个页面大小);

管道所传送的是无格式字节流,这就要求管道的读出方和写入方必须事先约定好数据的格式,比如多少字节算作一个消息(或命令、或记录)等等;

#include

#include

#include

#include

int main()

{

pid_t pid = 0;

int fds[2], nwr = 0;

char buf[128];

pipe(fds);

pid = fork();

if(pid < 0)

{

printf("Fork error.\n");

return -1;

}else if(pid == 0)

{

printf("This is child process, pid = %d\n", getpid());

//part A

printf("Child:waiting for message...\n");

nwr = read(fds[0], buf, sizeof(buf))

printf("Child:received\"%s\"\n", buf);

//part B

printf("Child:send reply\n");

strcpy(buf, "Reply from child");

nwr = write(fds[1], buf, sizeof(buf));

printf("Child:send %d bytes to parent.\n", nwr);

}else{

printf("This is parent process, pid = %d\n", getpid());

printf("Parent:sending message...\n");

strcpy(buf, "Message from parent");

nwr = write(fds[1], buf, sizeof(buf));

printf("Parent:send %d bytes to child.\n", nwr);

//part C

printf("Parent:waiting for reply from child...\n");

nwr = read(fds[0], buf, sizeof(buf));

printf("Parent:received \"%s\" from child\n", buf);

}

return 0;

}

命名管道

管道应用的一个重大限制是它没有名字,因此,只能用于具有亲缘关系的进程间通信,在有名管道(named pipe或FIFO)提出后,该限制

得到了克服。FIFO不同于管道之处在于它提供一个路径名与之关联,以FIFO的文件形式存在于文件系统中。这样,即使与FIFO的创建进程不存在亲缘关系的进程,只要可以访问该路径,就能够彼此通过FIFO相互通信(能够访问该路径的进程以及FIFO的创建进程之间),因此,通过FIFO不相关的进程也能交换数据。值得注意的是,FIFO严格遵循先进先出(first in first out),对管道及FIFO的读总是从开始处返回数据,对它们的写则把数据添加到末尾。它们不支持诸如lseek()等文件定位操作。

对命名管道的操作和对文件操作相似,包括创建,打开,读写,和关闭操作。

命名管道的创建

#include

#include

int mkfifo(const char *pathname, mode_t mode);

该函数的第一个参数是一个普通的路径名,也就是创建后FIFO的名字。第二个参数与打开普通文件的open()函数中的mode 参数相同。如果mkfifo的第一个参数是一个已经存在的路径名时,会返回EEXIST错误,所以一般典型的调用代码首先会检查是否返回该错误,如果确实

返回该错误,那么只要调用打开FIFO的函数就可以了吗,程序如下:

if(access(FIFO_NAME,F_OK)==-1){

res=mkfifo(FIFO_NAME,0777);

if(res!=0){

fprintf(stderr,"Could not create fifo %s\n",FIFO_NAME);

exit(EXIT_FAILURE);

}

}

res=open(FIFO_NAME,open_mode);

命名管道的打开

打开的FIFO的限制是:由于FIFO是单向数据传输,程序不能以O_RDWR方式打开FIFO同时进行读写操作,只能是O_RDONLY或者O_WRONLY方式,打开函数如下:

#include

#include

#include

int open(const char *pathname, int flags);

打开FIFO文件和普通文件的另外一个差别是:O_NONBLOCK选项对open的阻塞的影响,主要分为下面几种情况:

flags=O_RDONLY:open将会调用阻塞,除非有另外一个进程以写的方式打开同一个FIFO,否则一直等待。

flags=O_WRONLY:open将会调用阻塞,除非有另外一个进程以读的方式打开同一个FIFO,否则一直等待。

flags=O_RDONLY|O_NONBLOCK:如果此时没有其他进程以写的方式打开FIFO,此时open也会成功返回,此时FIFO被读打开,而不会返回错误。

flags=O_WRONLY|O_NONBLOCK:立即返回,如果此时没有其他进程以读的方式打开,open会失败打开,此时FIFO没有被打开,返回-1。

命名管道创建和打开测试程序:

#include

#include

#include

#include

#include

#include

#include

#define FIFO_NAME "/tmp/my_fifo"

int main(int argc,char *argv[])

{

int res;

int open_mode=0;

if(argc < 2){

fprintf(stderr,"Usage:%s

O_RDONLY,O_WRONLY,O_NONBLOCK\n",*argv);

exit(EXIT_FAILURE);

}

argv++;

if(strncmp(*argv,"O_RDONLY",8)==0)open_mode|=O_RDONLY;

if(strncmp(*argv,"O_WRONLY",8)==0)open_mode|=O_WRONLY;

if(strncmp(*argv,"O_NONBLOCK",10)==0)open_mode|=O_NONBLOCK;

argv++;

if(*argv){

if(strncmp(*argv,"O_RDONLY",8)==0)open_mode|=O_RDONLY;

if(strncmp(*argv,"O_WRONLY",8)==0)open_mode|=O_WRONLY;

if(strncmp(*argv,"O_NONBLOCK",10)==0)open_mode|=O_NONBLOCK;

}

if(access(FIFO_NAME,F_OK)==-1){

res=mkfifo(FIFO_NAME,0777);

if(res!=0){

fprintf(stderr,"Could not create fifo %s\n",FIFO_NAME);

exit(EXIT_FAILURE);

}

}

printf("process %d open FIFO with %d\n",getpid(),open_mode);

res=open(FIFO_NAME,open_mode);

printf("process %d result %d\n",getpid(),res);

sleep(5);

if(res!=-1)close(res);

printf("process %d finished\n",getpid());

exit(EXIT_SUCCESS);

}

命名管道的读写

对命名管道的读写需要利用系统调用read函数:

#include

ssize_t read(int fd, void *buf, size_t count);

ssize_t write(int fd, const void *buf, size_t count);

读取管道

是否采用O_NONBLOCK非阻塞标志对管道的读有影响:

对一个空的,阻塞的FIFO文件的read调用将会等待,直到有数据可以读时才继续执行。

对一个空的,非阻塞的FIFO的read系统调用将会立即返回0字节。

写管道

需要考虑FIFO可以存在的数据长度是有限制的,在limits.h文件中由#definde PIPE_BUF语句定义,通常是4096字节。

对于设置了阻塞标志的写操作:

当要写入的数据量不大于PIPE_BUF时,linux将保证写入的原子性。如果此时管道空闲缓冲区不足以容纳要写入的字节数,则进入睡眠,直到当缓冲区中能够容纳要写入的字节数时,才开始进行一次性写操作。

当要写入的数据量大于PIPE_BUF时,linux将不再保证写入的原子性。FIFO缓冲区一有空闲区域,写进程就会试图向管道写入数据,写操作在写完所有请求写的数据后返回。

对于没有设置阻塞标志的写操作:

当要写入的数据量大于PIPE_BUF时,linux将不再保证写入的原子性。在写满所有FIFO空闲缓冲区后,写操作返回。

当要写入的数据量不大于PIPE_BUF时,linux将保证写入的原子性。如果当前FIFO空闲缓冲区能够容纳请求写入的字节数,写完后成功返回;如果当前FIFO空闲缓冲区不能够容纳请求写入的字节数,则返回EAGAIN错误,提醒以后再写;

命名管道的关闭

#include

int close(int fd);

总结

管道常用于两个方面:在shell中时常会用到管道(作为输入输入的重定向),在这种应用方式下,管道的创建对于用户来说是透明的;用于具有亲缘关系的进程间通信,用户自己创建管道,并完成读写操作。FIFO可以说是管道的推广,克服了管道无名字的限制,使得无亲缘关系的进程同样可以采用先进先出的通信机制进行通信。管道和FIFO的数据是字节流,应用程序之间必须事先确定特定的传输"协议",采用传播具有特定意义的消息

Linux管道的原子性,管道机制相关推荐

  1. Linux管道的原子性,管道的原子性 linux写操作原子性

    从本质上说,管道也是一种文件,但他又和一般的文件有所不同,管道可以克服使用文件进行通信的两个问题 限制管道的大小.实际上,管道是一个固定大小的缓冲区.在Linux中该换冲区的大小为一页,4k 使得他的 ...

  2. linux管道文件的实现原理,管道(无名管道)通信机制原理和实现详解

    管道(pipe)允许两个进程进行通信,是早期 UNIX 系统最早使用的一种IPC 机制.管道为进程之间的相互通信提供了一种较为简单的方法,尽管也有一定的局限性. 在实现管道时,应该考虑以下四个问题: ...

  3. 【编撰】linux IPC 002 - 匿名管道PIPE和有名管道FIFO的概念和实例,以及应用比较

    前言:上一节提到IPC的概述,本一节,原文作者比较详细的讨论了,管道的概念和实例和使用场景: 原文作者:郑彦兴 (mlinux@163.com)国防科大计算机学院 http://www.ibm.com ...

  4. Linux中的pipe(管道)与named pipe(FIFO 命名管道)

    catalogue 1. pipe匿名管道 2. named pipe(FIFO)有名管道 1. pipe匿名管道 管道是Linux中很重要的一种通信方式,是把一个程序的输出直接连接到另一个程序的输入 ...

  5. Linux系统中的管道通信

    目录 管道如何通信 管道的访问控制机制: 匿名管道 匿名管道数据传输的原理 如何使用(代码案例) 用C/C++代码编译实现父子进程间通信案例 : 思路 实现 命名管道 为什么要有命名管道 回归进程间通 ...

  6. linux系统调用创建无名管道,无名管道系统调用

    本文关键字: linux 管道通信,linux 进程通信方式,无名管道 1.管道创建与关闭说明 管道是基于文件描述符的通信方式,当一个管道建立时,它会创建两个文件描述符fd[0]和fd[1],其中fd ...

  7. linux无名管道和有名管道

    1)无名管道:管道是半双工的,数据只能向一个方向流动:需要双方通信时,需要建立起两个管道:只能用于父子进程或者兄弟进程之间(具有亲缘关系的进程). 单独构成一种独立的文件系统:管道对于管道两端的进程而 ...

  8. 管道半双工通信程序linux,Linux进程间通信的几种方法-半双工管道,命名管道,消息队列...

    1.半双工管道 简单实现 半双工管道可以实现父进程和子进程之间或者子进程之间(前提是有共同的祖先)的通信 因为是半双工,所以两端不可能同时读取,而是一端读一端取,而且当一端分配到读任务后,那么他就固定 ...

  9. linux用pipe创建的文件类型,linux文件类型之 管道

    inux 管道管道是Linux中很重要的一种通信方式,是把一个程序的输出直接连接到另一个程序的输入,常说的管道多是指无名管道,无名管道只能用于具有亲缘关系的进程之间,这是它与有名管道的最大区别.有名管 ...

最新文章

  1. POJ1523 SPF tanjar割点求块数
  2. parquet java_Apache Parquet Java API的文档?
  3. 页面整体居中 左右出现白边html,html2canvas生成图片出现白边儿的解决方法
  4. 金蝶BOS社区版Beta1 下载
  5. 在继承中派生类成员的访问权限测试
  6. NoSQL(三):主从复制
  7. 宝塔LNMP使用步骤nginx+php 7.2
  8. js获取一个月份最大天数和获取月的最后一天
  9. Speex manul(手册)中文版
  10. 你的账户配置为阻止使用计算机,Win10打开软件提示为了对电脑进行保护,已经阻止此应用解决方法...
  11. vs2021下载步骤
  12. 回顾刚来的那一天还历历在目,不禁感概一番
  13. 华为RH2288V3安装CentOS、Ubuntu、Windows 2012
  14. POI读取Excel 各种特殊数字和类型的转换
  15. MySQL008:数据库引擎,如何设置引擎独立空间
  16. 原生Android安装小米云服务,小米云服务在哪里打开 新版MIUI小米云服务打开路径介绍...
  17. 微信公众号教程(3)微信公众平台群发消息
  18. 【蓝桥杯预备营集结三】软件类 C/C++ 预备试题分析及解答
  19. 如何恢复红米手机数据
  20. POJ 1845 【数论】

热门文章

  1. 这款 20 万开发者使用的开发插件到底经历了什么?
  2. 掌握这35 个小细节,助你有效提升 Java 代码的执行效率!
  3. 为何 IntelliJ IDEA 比 Eclipse 更好?
  4. mysql backup_Mysqlbackup 备份详解(mysql官方备份工具)
  5. linux qt libusb,Ubuntu15下Qt+libusb开发
  6. webrtc rtsp播放
  7. python numpy转字符串
  8. pyqt设置按钮边框
  9. HTML5网页上播放mp4失败的原因
  10. 二十五、redis主从复制