linux管道pipe详解
管道
管道的概念:
管道是一种最基本的IPC机制,作用于有血缘关系的进程之间,完成数据传递。调用pipe系统函数即可创建一个管道。有如下特质:
1. 其本质是一个伪文件(实为内核缓冲区)
2. 由两个文件描述符引用,一个表示读端,一个表示写端。
3. 规定数据从管道的写端流入管道,从读端流出。
管道的原理: 管道实为内核使用环形队列机制,借助内核缓冲区(4k)实现。
管道的局限性:
① 数据自己读不能自己写。
② 数据一旦被读走,便不在管道中存在,不可反复读取。
③ 由于管道采用半双工通信方式。因此,数据只能在一个方向上流动。
④ 只能在有公共祖先的进程间使用管道。
常见的通信方式有,单工通信、半双工通信、全双工通信。
pipe函数
创建管道
int pipe(int pipefd[2]); 成功:0;失败:-1,设置errno
函数调用成功返回r/w两个文件描述符。无需open,但需手动close。规定:fd[0] → r; fd[1] → w,就像0对应标准输入,1对应标准输出一样。向管道文件读写数据其实是在读写内核缓冲区。
管道创建成功以后,创建该管道的进程(父进程)同时掌握着管道的读端和写端。如何实现父子进程间通信呢?通常可以采用如下步骤:
1. 父进程调用pipe函数创建管道,得到两个文件描述符fd[0]、fd[1]指向管道的读端和写端。
2. 父进程调用fork创建子进程,那么子进程也有两个文件描述符指向同一管道。
3. 父进程关闭管道读端,子进程关闭管道写端。父进程可以向管道中写入数据,子进程将管道中的数据读出。由于管道是利用环形队列实现的,数据从写端流入管道,从读端流出,这样就实现了进程间通信。
练习:父子进程使用管道通信,父写入字符串,子进程读出并,打印到屏幕。 【pipe.c】
思考:为甚么,程序中没有使用sleep函数,但依然能保证子进程运行时一定会读到数据呢?
#include <unistd.h>
#include <string.h>
#include <stdlib.h>
#include <stdio.h>
#include <sys/wait.h>void sys_err(const char *str)
{perror(str);exit(1);
}int main(void)
{pid_t pid;char buf[1024];int fd[2];char *p = "test for pipe\n";if (pipe(fd) == -1) sys_err("pipe");pid = fork();if (pid < 0) {sys_err("fork err");} else if (pid == 0) {close(fd[1]);int len = read(fd[0], buf, sizeof(buf));write(STDOUT_FILENO, buf, len);close(fd[0]);} else {close(fd[0]);write(fd[1], p, strlen(p));wait(NULL);close(fd[1]);}return 0;
}
管道的读写行为
使用管道需要注意以下4种特殊情况(假设都是阻塞I/O操作,没有设置O_NONBLOCK标志):
1. 如果所有指向管道写端的文件描述符都关闭了(管道写端引用计数为0),而仍然有进程从管道的读端读数据,那么管道中剩余的数据都被读取后,再次read会返回0,就像读到文件末尾一样。
2. 如果有指向管道写端的文件描述符没关闭(管道写端引用计数大于0),而持有管道写端的进程也没有向管道中写数据,这时有进程从管道读端读数据,那么管道中剩余的数据都被读取后,再次read会阻塞,直到管道中有数据可读了才读取数据并返回。
3. 如果所有指向管道读端的文件描述符都关闭了(管道读端引用计数为0),这时有进程向管道的写端write,那么该进程会收到信号SIGPIPE,通常会导致进程异常终止。当然也可以对SIGPIPE信号实施捕捉,不终止进程。具体方法信号章节详细介绍。
4. 如果有指向管道读端的文件描述符没关闭(管道读端引用计数大于0),而持有管道读端的进程也没有从管道中读数据,这时有进程向管道写端写数据,那么在管道被写满时再次write会阻塞,直到管道中有空位置了才写入数据并返回。
总结:
① 读管道: 1. 管道中有数据,read返回实际读到的字节数。
2. 管道中无数据:
(1) 管道写端被全部关闭,read返回0 (好像读到文件结尾)
(2) 写端没有全部被关闭,read阻塞等待(不久的将来可能有数据递达,此时会让出cpu)
② 写管道: 1. 管道读端全部被关闭, 进程异常终止(也可使用捕捉SIGPIPE信号,使进程不终止)
2. 管道读端没有全部关闭:
(1) 管道已满,write阻塞。
(2) 管道未满,write将数据写入,并返回实际写入的字节数。
练习:使用管道实现父子进程间通信,完成:ls | wc –l。假定父进程实现ls,子进程实现wc。
ls命令正常会将结果集写出到stdout,但现在会写入管道的写端;wc –l 正常应该从stdin读取数据,但此时会从管道的读端读。 【pipe1.c】
#include <stdio.h>
#include <unistd.h>
#include <sys/wait.h>int main(void)
{pid_t pid;int fd[2];pipe(fd);pid = fork();if (pid == 0) { //childclose(fd[1]); //子进程从管道中读数据,关闭写端dup2(fd[0], STDIN_FILENO); //让wc从管道中读取数据execlp("wc", "wc", "-l", NULL); //wc命令默认从标准读入取数据} else {close(fd[0]); //父进程向管道中写数据,关闭读端dup2(fd[1], STDOUT_FILENO); //将ls的结果写入管道中execlp("ls", "ls", NULL); //ls输出结果默认对应屏幕}return 0;
}/** 程序不时的会出现先打印$提示符,再出程序运行结果的现象。* 这是因为:父进程执行ls命令,将输出结果给通过管道传递给* 子进程去执行wc命令,这时父进程若先于子进程打印wc运行结果* 之前被shell使用wait函数成功回收,shell就会先于子进程打印* wc运行结果之前打印$提示符。* 解决方法:让子进程执行ls,父进程执行wc命令。或者在兄弟进程间完成。*/
程序执行,发现程序执行结束,shell还在阻塞等待用户输入。这是因为,shell → fork → ./pipe1, 程序pipe1的子进程将stdin重定向给管道,父进程执行的ls会将结果集通过管道写给子进程。若父进程在子进程打印wc的结果到屏幕之前被shell调用wait回收,shell就会先输出$提示符。
练习:使用管道实现兄弟进程间通信。 兄:ls 弟: wc -l 父:等待回收子进程。
要求,使用“循环创建N个子进程”模型创建兄弟进程,使用循环因子i标示。注意管道读写行为。 【pipe2.c】
#include <stdio.h>
#include <unistd.h>
#include <sys/wait.h>int main(void)
{pid_t pid;int fd[2], i;pipe(fd);for (i = 0; i < 2; i++) {if((pid = fork()) == 0) {break;}}if (i == 0) { //兄close(fd[0]); //写,关闭读端dup2(fd[1], STDOUT_FILENO); execlp("ls", "ls", NULL); } else if (i == 1) { //弟close(fd[1]); //读,关闭写端dup2(fd[0], STDIN_FILENO); execlp("wc", "wc", "-l", NULL); } else {close(fd[0]);close(fd[1]);for(i = 0; i < 2; i++) //两个儿子wait两次wait(NULL);}return 0;
}
测试:是否允许,一个pipe有一个写端,多个读端呢?是否允许有一个读端多个写端呢? 【pipe3.c】
#include <stdio.h>
#include <unistd.h>
#include <sys/wait.h>
#include <string.h>
#include <stdlib.h>int main(void)
{pid_t pid;int fd[2], i, n;char buf[1024];int ret = pipe(fd);if(ret == -1){perror("pipe error");exit(1);}for(i = 0; i < 2; i++){if((pid = fork()) == 0)break;else if(pid == -1){perror("pipe error");exit(1);}}if (i == 0) { close(fd[0]); write(fd[1], "1.hello\n", strlen("1.hello\n"));} else if(i == 1) { close(fd[0]); write(fd[1], "2.world\n", strlen("2.world\n"));} else {close(fd[1]); //父进程关闭写端,留读端读取数据
// sleep(1);n = read(fd[0], buf, 1024); //从管道中读数据write(STDOUT_FILENO, buf, n);for(i = 0; i < 2; i++) //两个儿子wait两次wait(NULL);}return 0;
}
linux管道pipe详解相关推荐
- linux管道命令详解,Linux系统中的管道命令的用法详解
Linux系统中管道命令是linux系统的一个强大之处.下面由学习啦小编为大家整理了Linux系统中的管道命令的用法详解的相关知识,希望对大家有帮助! Linux系统中的管道命令的用法详解 管道命令操 ...
- Linux 管道操作符详解
管道操作符 : | 我们在Linux下经常要用到管道操作符,也就是"|",即一个竖线. 这个操作符的作用对于经常使用Linux的人来说,看上去十分直观: 不就是将前一个指令的结果交 ...
- java nio pipe_NIO之管道 (Pipe)详解
1 @Test 2 public void testPipe() throws IOException { 3 // 1.获取通道 4 Pipe pipe = Pipe.open(); 5 6 // ...
- linux管道pipe 示例
参考:linux管道pipe详解 注意 当fork 创建子进程也会把 pipe 复制下来 #include <stdio.h>#include <unistd.h>#inclu ...
- linux usb声卡 submit urb,linux usb urb详解
linux usb urb详解 谨以此文纪念过往的岁月 一.前言 在前文中看过了hub的驱动以及host的驱动还有usb设备的驱动,在把这些东西关联起来的东东中,一个很重要的urb(usb reque ...
- Linux常用命令详解(最全)
Linux命令目录 Linux命令集合 系统信息 关机 (系统的关机.重启以及登出 ) 文件和目录 文件搜索 挂载一个文件系统 磁盘空间 用户和群组 文件的权限 - 使用 "+" ...
- linux文件权限详解
linux文件权限详解 一.文件和目录权限概述 在linux中的每一个文件或目录都包含有访问权限,这些访问权限决定了谁能访问和如何访问这些文件和目录. 通过设定权限可以从以下三种访问方式限制访问权限: ...
- python popen阻塞_对Python subprocess.Popen子进程管道阻塞详解
问题产生描述 使用子进程处理一个大的日志文件,并对文件进行分析查询,需要等待子进程执行的输出结果,进行下一步处理. 出问题的代码 # 启用子进程执行外部shell命令 def __subprocess ...
- linux sort 命令详解
linux sort 命令详解 sort命令的功能是对文件中的各行进行排序.sort命令有许多非常实用的选项,这些选项最初是用来对数据库格式的文件内容进行各种排序操作的.实际上,sort命令可以被认为 ...
最新文章
- 使用session防止表单进行重复提交
- WF4.0 基础篇 (二十八) WF调用PowerShell
- mybatis整合数据权限
- 查找算法(C实现)(待补充)
- 浅淡Kubernetes 与容器技术体系的最佳方法
- Dubbo(五)之动态配置中心
- count() * ,1,字段 三兄弟
- java项目使用junit_在Java 8之前的项目中使用JUnit 5
- 一步步编写操作系统 09 写个mbr
- RedMonk 2020 年 Q3 编程语言排行:Python力压Java和PHP,Rust 首次进入前 20
- redis DB操作
- 800变频器故障代码_变频器通用故障码意义汇总讲解
- 29.Jwt集成(3):token设置过期时间、异常判断
- html简单网页代码 案例_HTML+CSS静态网页练习案例(转动的八卦图)
- (4)数据结构-线性表补充
- python简易问答机器人_Python入门到实践-问答机器人
- ionic加载html5,ionic 加载动画
- 阴历阳历相互转换c代码
- 论学习计划的 重要性
- NoSQL 数据库有哪些典型应用?
热门文章
- 教Kindle新手 手动升级Kindle固件至5.8.5.0.1 全过程
- H.266/VVC技术学习:帧内预测之PDPC技术
- 力求颜值与干货齐高,出品人深度解读三大专场
- Android 8.0 系统中添加护眼模式
- python输入直角三角形a、b、输出斜边c_编写Python程序,从键盘输入直角三角形两直角边a,b,求斜边c,并输出....
- LaTeX 进阶语法
- C语言 ——二维数组
- Cesium常用知识及学习
- EXE4J_JAVA_HOME错误
- Caused by: java.lang.NoClassDefFoundError: org/apache/curator/framework/CuratorFrameworkFactory