2.10 进程间通信简介
01 进程间通讯概念
- 进程是一个独立的资源分配单元,不同进程
(这里所说的进程通常指的是用户进程)之间的资源是独立的,没有关联,不能在一个进程中直接访问另一个进程的资源。 - 但是,进程不是孤立的,不同的进程需要进行信息的交互和状态的传递等,因此需要进程间通信( IPC: Inter Processes Communication )。
- 进程间通信的目的:
- 数据传输: 一个进程需要将它的数据发送给另一个进程
- 通知事件: 一个进程需要向另一个或一组进程发送消息,通知它 (它们)发生了某种事件(如进程终止时要通知父进程)
- 资源共享:多个进程之间共享同样的资源。为了做到这一点,需要内核提供互斥和同步机制。
- 进程控制: 有些进程希望完全控制另一个进程的执行 (如 Debug 进程),此时控制进程希望能够拦截另一个进程的所有陷入和异常,并能够及时知道它的状态改变。
02 Linux进程间通信的方式
2.11 匿名管道概述
03匿名管道
04 管道的特点
- 管道其实是一个在内核内存中维护的缓冲器,这个缓冲器的存储能力是有限的,不同的操作系统大小不一定相同
- 管道拥有文件的特质 : 读操作、写操作,匿名管道没有文件实体,有名管道有文件实体,但不存储数据。可以按照操作文件的方式对管道进行操作
- 一个管道是一个字节流,使用管道时不存在消息或者消息边界的概念,从管道读取数据的进程可以读取任意大小的数据块,而不管写入进程写入管道的数据块的大小是多少
- 通过管道传递的数据是顺序的,从管道中读取出来的字节的顺序和它们被写入管道的顺序是完全一样的。
- 在管道中的数据的传递方向是单向的,一端用于写入,一端用于读取,管道是半双工的
- 从管道读数据是一次性操作,数据一旦被读走,它就从管道中被抛弃,释放空间以便写更多的数据,在管道中无法使用 lseek() 来随机的访问数据。
- 匿名管道只能在具有公共祖先的进程 (父进程与子进程,或者两个兄弟进程,具有亲缘关系) 之间使用。
05 为什么可以使用管道进行进程间通信
父进程里面的5往管道里面写数据,子进程6就可以从管道里面读数据了
子进程里面的5往管道写数据,父进程里面的6就可以从管道里面读数据了
如此便实现了通过管道进行进程间通信
06管道的数据结构
数据结构:环形的队列
可以循环利用空间
07匿名管道的使用
//创建匿名管道
#include<unistd.h>
int pipe(int pipefd[2]);
//查看管道缓冲大小命令
ulimit -a
//查看管道缓冲大小函数
#include<unistd.h>
long fpathconf(int fd, int name);
2.12父子进程通过匿名管道通信
/*
#include <unistd.h>
int pipe(int pipefd[2]);
功能:创建一个匿名管道,用来进程间通信。
参数:int pipefd[2] 这个数组是一个传出参数。
pipefd[0] 对应的是管道的读端
pipefd[1] 对应的是管道的写端
返回值:
成功 0
失败 -1
管道默认是阻塞的:如果管道中没有数据,read阻塞,如果管道满了,write阻塞
注意:匿名管道只能用于具有关系的进程之间的通信(父子进程,兄弟进程)
*/
// 子进程发送数据给父进程,父进程读取到数据输出
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
return -1;
}
pid_t pid = fork();
if(pid>0){
//父进程
//从管道的读取端读取数据
char buf[1024] = {0};
int len = read(pipefd[0], buf,sizeof(buf));
printf("parent recv: %s,pid : %d \n",buf,getpid());
}else if(pid ==0){
//子进程
//写数据
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
}
return 0;
}
循环发送接收数据
// 子进程发送数据给父进程,父进程读取到数据输出
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
return -1;
}
pid_t pid = fork();
if(pid>0){
//父进程
//从管道的读取端读取数据
printf("i am parent process , pid :%d, ppid : %d\n",getpid(),getppid());
char buf[1024] = {0};
while(1){
//父子进程都可以读写,如果父进程先读后写,子进程必须先写后读,反过来也可以。
//不能两个一起读或者两个一起写,这样会陷入死锁
int len = read(pipefd[0], buf,sizeof(buf));
printf("parent recv: %s,pid : %d \n",buf,getpid());
//向管道写数据
char *str = "hello,i am parent";
write(pipefd[1],str,strlen(str));
sleep(1);
}
}else if(pid ==0){
//子进程
//写数据
printf("i am child process , pid :%d, ppid : %d\n",getpid(),getppid());
char buf[1024] = {0};
while(1){
//向管道写数据
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
sleep(1);
int len = read(pipefd[0], buf,sizeof(buf));
printf("child recv: %s,pid : %d \n",buf,getpid());
}
}
return 0;
}
管道查看缓冲区大小:ulimit -a
使用fpathconf
#include<unistd.h>
#include<sys/types.h>
#include<stdio.h>
#include<stdlib.h>
#include<string.h>
int main(){
int pipefd[2];
//int ret = pipe(pipefd);
pipe(pipefd);
//获取管道的大小
long size = fpathconf(pipefd[0],_PC_PIPE_BUF);
printf("pipe size : %ld \n", size);
return 0;
}
和使用命令ulimit -a
查出来的一样4k
2.13 匿名管道通信案例
上面写的代码有点小问题,将上述父进程里面的sleep注释掉,再运行,我们可以发现上面parent接受的信息来自自己,明显不合理。
解决:加入bzero(str,n)函数,能够将内存块(字符串)的前n个字节清零。但是没有解决问题。
其实我们真正开发的时候,管道的某一端要么是读端,要么是写端,不会读和写兼顾,代码改成如下方式,便可正常运行。
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
return -1;
}
pid_t pid = fork();
if(pid>0){
//父进程
//从管道的读取端读取数据
printf("i am parent process , pid :%d, ppid : %d\n",getpid(),getppid());
//关闭写端
close(pipefd[1]);
char buf[1024] = {0};
while(1){
//父子进程都可以读写,如果父进程先读后写,子进程必须先写后读,反过来也可以。
//不能两个一起读或者两个一起写,这样会陷入死锁
int len = read(pipefd[0], buf,sizeof(buf));
printf("parent recv: %s,pid : %d \n",buf,getpid());
//向管道写数据
// char *str = "hello,i am parent";
// write(pipefd[1],str,strlen(str));
//sleep(1);
}
}else if(pid ==0){
//子进程
//写数据
printf("i am child process , pid :%d, ppid : %d\n",getpid(),getppid());
//关闭读端
close(pipefd[0]);
char buf[1024] = {0};
while(1){
//向管道写数据
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
//sleep(1);
// int len = read(pipefd[0], buf,sizeof(buf));
// printf("child recv: %s,pid : %d \n",buf,getpid());
//能够将内存块(字符串)的前n个字节清零
//bzero(buf,1024);
}
}
return 0;
}
父子进程间通信案例
/*
实现 ps aux | grep xxx 父子进程间通信
子进程:ps aux,子进程结束后,将数据发送给父进程
父进程:获取到数据,过滤
pipe()
execlp()
子进程将标准输出 stdout_fileno 重定向到管道的写端。 dup2
*/
#include<unistd.h>
#include<sys/types.h>
#include<stdio.h>
#include<stdlib.h>
#include<string.h>
#include<wait.h>
int main(){
//创建管道(要在进程之前创建)
int fd[2];
int ret = pipe(fd);
if(ret == -1){
perror("pipe");
exit(0);
}
//创建进程
pid_t pid = fork();
if(pid > 0){
//父进程
//关闭写端
close(fd[1]);
//从管道读取
char buf[1024] = {0};
int len = -1;
while(( len = read(fd[0],buf,sizeof(buf)-1))>0 ){
//过滤数据输出
printf("%s",buf);
//清空一下数组里面的内容
memset(buf,0,1024);
}
wait(NULL);
}else if(pid ==0){
//子进程
//关闭读端
close(fd[0]);
//写数据
//文件描述符重定向 stdout_fileno -> fd[1]
dup2(fd[1],STDOUT_FILENO);
//执行ps aux
execlp("ps","ps","aux",NULL);
perror("execlp");
exit(0);
}else{
perror("fork");
exit(0);
}
return 0;
}
2.14 管道的读写特点和管道设置为非阻塞
管道的读写特点
使用管道时,需要注意以下几种特殊的情况(假设都是阻塞I/O操作)
1、所有的指向管道写端的文件描述符都关闭(管道写端引用计数为0),有进程从管道的读端读数据,那么管道中剩余的数据被读取之后,再次read会返回0,就像读到文件末尾一样。
2、如果有指向管道写端的文件描述符没有关闭(管道的写端引用计数大于0),而持有管道写端的进程也没有往管道中写数据,这个时候有进程从管道中读取数据,那么管道中剩余的数据被读取后,再次read会阻塞,直到管道中有数据可以读了才读取数据并返回。
3、如果所有指向管道读端的文件描述符都关闭(管道的读端引用计数为0),这个时候有进程向管道中写数据,那么该进程会收到一个信号SIGPIPE,通常会导致进程异常终止。
4、如果有指向管道读端的文件描述符没有关闭(管道的读端引用计数大于0),而持有管道读端的进程也没有从管道中读数据,这时有进程向管道中写数据,那么在管道被写满时再次write会阻塞,直到管道中有空位置才能再次写入数据并返回。
总结:
读管道:
管道中有数据:
read返回实际读到的字节数
管道中无数据:
写端被全部关闭:read返回0(相对于读到文件的末尾)
写端没有完全关闭:read阻塞等待写入数据
写管道:
管道读端全部关闭:
进程异常终止(进程收到SIGPIPE信号)
管道读端没有全部关闭:
管道已满:write阻塞
管道没有满:write将数据写入,并返回实际写入的字节数
// 子进程发送数据给父进程,父进程读取到数据输出
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <fcntl.h>
/*
设置管道非阻塞
int flags = fcntl(fd[0],F_GETFL); //获取原来的flag
flags |= O_NONBLOCK; //修改flag的值
fcntl(fd[0],F_SETFL,flags); //设置新的flag
*/
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
return -1;
}
pid_t pid = fork();
if(pid>0){
//父进程
//从管道的读取端读取数据
printf("i am parent process , pid :%d, ppid : %d\n",getpid(),getppid());
//关闭写端
close(pipefd[1]);
char buf[1024] = {0};
int flags = fcntl(pipefd[0],F_GETFL); //获取原来的flag
flags |= O_NONBLOCK; //修改flag的值
fcntl(pipefd[0],F_SETFL,flags); //设置新的flag
while(1){
int len = read(pipefd[0], buf,sizeof(buf));
printf("len: %d\n",len);
printf("parent recv: %s,pid : %d \n",buf,getpid());
memset(buf,0,1024);
sleep(1);
}
}else if(pid ==0){
//子进程
//写数据
printf("i am child process , pid :%d, ppid : %d\n",getpid(),getppid());
//关闭读端
close(pipefd[0]);
char buf[1024] = {0};
while(1){
//向管道写数据
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
sleep(5);
}
}
return 0;
}
从运行结果我们可以看出刚开始管道没有内容,所以len返回-1,parent接受的内容为空。
后来child开始写入内容,父进程返回的长度为16,接收到内容,
child写入后休眠5秒,len返回-1,返回-1,返回-1
如果不设置阻塞,结果会如下所示
2.15 有名管道介绍及使用
-
匿名管道,由于没有名字,只能用于亲缘关系的进程间通信。为了克服这个缺点,提出了有名管道 (FIFO)也叫命名管道、FIFO文件
-
有名管道 (FIFO)不同于匿名管道之处在于它提供了一个路径名与之关联,以 FIFO的文件形式存在于文件系统中,并且其打开方式与打开一个普通文件是一样的,这样即使与 FIFO的创建进程不存在亲缘关系的进程,只要可以访问该路径,就能够彼此通过FIFO相互通信,因此,通过 FIFO不相关的进程也能交换数据
-
一旦打开了 FIFO,就能在它上面使用与操作匿名管道和其他文件的系统调用一样的I/0系统调用了 (如read()、write()和close()) 。与管道一样,FIFO也有-个写入端和读取端,并且从管道中读取数据的顺序与写入的顺序是一样的。EIFO的名称也由此而来:先入先出。
-
有名管道 (FIFO)和匿名管道 (pipe) 有一些特点是相同的,不一样的地方在于
- 1、FIFO 在文件系统中作为一个特殊文件存在,但 FIFO中的内容却存放在内存中
- 2、当使用 FIFO的进程退出后,FIFO 文件将继续保存在文件系统中以便以后使用
- 3、FIFO 有名字,不相关的进程可以通过打开有名管道进行通信。
有名管道的使用
有名管道读写小例子
write.c
//向管道写数据
#include<stdio.h>
#include<stdlib.h>
#include<sys/stat.h>
#include<sys/types.h>
#include<unistd.h>
#include<fcntl.h>
#include<string.h>
int main(){
//1、判断文件是否存在
int ret = access("test",F_OK);
if(ret == -1){
printf("管道不存在,创建管道\n");
//2、创建管道文件
ret = mkfifo("test",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
printf("管道创建成功。\n");
}else{
printf("管道文件已经存在。\n");
}
//3、打开管道(以只写的方式)
int fd = open("test",O_WRONLY);
if(fd == -1){
perror("open");
return -1;
}
//写数据
for(int i=0;i<100;i++){
char buf[1024];
sprintf(buf,"hello,%d \n",i);
printf("write data : %s\n",buf);
write(fd,buf,strlen(buf));
sleep(1);
}
close(fd);
return 0;
}
read.c
//从管道读数据
#include<stdio.h>
#include<stdlib.h>
#include<sys/stat.h>
#include<sys/types.h>
#include<unistd.h>
#include<fcntl.h>
#include<string.h>
int main(){
//打开文件
int fd = open("test",O_RDONLY);
if(fd == -1){
perror("open");
return -1;
}
//读取数据
while(1){
char buf[1024]={0};
int len = read(fd,buf,sizeof(buf));
if(len == 0){
printf("写端断开连接了。。。\n");
break;//使用break而不是return -1原因,如果使用return就直接退出程序,不会走后面的关闭操作了
}
printf("receive buf : %s \n",buf);
}
close(fd);
return 0;
}
注:只执行其中一个函数,会处于阻塞,必须两个同时运行才可以
2.16 有名管道实现简单版聊天功能
chatA.c
#include<stdio.h>
#include<unistd.h>
#include<sys/types.h>
#include<sys/stat.h>
#include<fcntl.h>
#include<string.h>
int main(){
//1、判断是否存在有名管道这个文件
int ret = access("fifo1",F_OK);
if(ret == -1){
//不存在,创建该文件
printf("管道不存在,创建对应的有名管道\n");
ret = mkfifo("fifo1",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
//判断fifo2
ret = access("fifo2",F_OK);
if(ret == -1){
//不存在,创建该文件
printf("管道不存在,创建对应的有名管道\n");
ret = mkfifo("fifo2",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
//2、以只写的方式打开管道fifo1
int fdw = open("fifo1",O_WRONLY);
if(fdw == -1){
perror("open");
return -1;
}
printf("打开fifo1管道成功,等待写入。。。。\n");
//3、以只读的方式打开管道fifo2
int fdr = open("fifo2",O_RDONLY);
if(fdr == -1){
perror("open");
return -1;
}
printf("打开fifo2管道成功,等待读取数据。。。。\n");
//4、循环的写读数据
char buf[128];
while(1){
memset(buf,0,128);
//获取标准输入的数据
fgets(buf,128,stdin);
//写数据
//write第三个参数 需要读取的数据量 要写128不能写strlen(buf),因为buf未复制,strlen(buf)=0
int ret = write(fdw,buf,128);
if(ret == -1){
perror("write");
return -1;
}
//5、读管道
memset(buf,0,128);
ret = read(fdr,buf,128);
if(ret <= 0){
perror("read");
return -1;
}
printf("buf: %s \n",buf);
}
//6、关闭文件描述符
close(fdr);
close(fdw);
return 0;
}
chatB.c
#include<stdio.h>
#include<unistd.h>
#include<sys/types.h>
#include<sys/stat.h>
#include<fcntl.h>
#include<string.h>
int main(){
//1、判断是否存在有名管道这个文件
int ret = access("fifo1",F_OK);
if(ret == -1){
//不存在,创建该文件
printf("管道不存在,创建对应的有名管道\n");
ret = mkfifo("fifo1",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
//判断fifo2
ret = access("fifo2",F_OK);
if(ret == -1){
//不存在,创建该文件
printf("管道不存在,创建对应的有名管道\n");
ret = mkfifo("fifo2",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
//2、以只读的方式打开管道fifo1
int fdr = open("fifo1",O_RDONLY);
if(fdr == -1){
perror("open");
return -1;
}
printf("打开fifo1管道成功,等待读取数据。。。。\n");
//3、以只写的方式打开管道fifo2
int fdw = open("fifo2",O_WRONLY);
if(fdw == -1){
perror("open");
return -1;
}
printf("打开fifo2管道成功,等待写入数据。。。。\n");
//4、循环的写读数据
char buf[128];
while(1){
//5、读管道
memset(buf,0,128);
ret = read(fdr,buf,128);
if(ret <= 0){
perror("read");
return -1;
}
printf("buf: %s \n",buf);
memset(buf,0,128);
//获取标准输入的数据
fgets(buf,128,stdin);
//写数据
ret = write(fdw,buf,128);
if(ret == -1){
perror("write");
return -1;
}
}
//6、关闭文件描述符
close(fdr);
close(fdw);
return 0;
}
运行成功就能聊天,但是只能说一句回一句,并且a先说话