Linux操作系统~匿名管道和命名管道的使用及其原理分析

最新推荐文章于 2024-04-21 16:34:00 发布

_Zebra

最新推荐文章于 2024-04-21 16:34:00 发布

阅读量933

点赞数 1

分类专栏： Linux C++ 文章标签：数据结构 linux c++ 服务器网络

本文链接：https://blog.csdn.net/qq_24016309/article/details/128123689

版权

C++ 同时被 2 个专栏收录

30 篇文章 0 订阅

订阅专栏

Linux

28 篇文章 0 订阅

订阅专栏

1.匿名管道

（1）.匿名管道的原理

1.创建子进程的时候，PCB也是要自己有一份的，同样里面的files_struct也是要自己独立有一份的（这些都属于进程的数据结构，进程是具有独立性的）

2.而通过文件描述符找到的struct_file则是不需要给子进程拷贝一份的，因为这个是属于文件的，和创建进程没有关系。

3.调用write方法的时候，是系统调用，会先将数据放在文件的内核缓冲区（不是C语言层面的缓冲区），底层定期的将缓冲区中的内容写到磁盘中。

可以看出，父进程和子进程可以看到的公共区域是struct_file，这里也就可以进行进程间通信了。struct_file里面有文件缓冲区，一个进程往缓冲区里面写数据，一个进程往缓冲区里面读数据，这就是匿名管道的原理，一种基于文件的通信方式

（2）.pipe接口的使用

pipefd[2]:是一个输出性参数!我们想通过这个参数读取到打开的两个fd/

int pipe(int pipefd[ 2]);

pipe[0]表示读取端，pipe[1]表示写入端

e.g.:

#include <stdio.h>
#include <string.h>
#include <unistd.h>
#include <sys/wait.h>
#include <stdlib.h>

int main()
{
    int pipe_fd[2] = {0};

    if (pipe(pipe_fd) < 0)
    {
        perror("pipe");
        return 1;
    }
    printf("%d, %d\n", pipe_fd[0], pipe_fd[1]); // 输出3,4

    pid_t id = fork();
    if (id < 0)
    {
        perror("fork");
        return 2;
    }
    else if (id == 0)
    { 
        // 让父进程读取，子进程写入
        close(pipe_fd[0]); // 关掉读取端

        char c = 'x';
        int count = 0;

        while (1)
        {
            write(pipe_fd[1], &c, 1);
            // sleep(1);
            count++;
            printf("write: %d\n", count);
        }

        close(pipe_fd[1]);
        exit(0);
    }
    else
    { 
        // 父进程读
        close(pipe_fd[1]); // 关掉写入端

        char buffer[64];
        while (1)
        {
            // sleep(100);让父进程不读，用于模拟计算管道的大小
            sleep(1);
            size_t size = read(pipe_fd[0], buffer, sizeof(buffer) - 1); // 默认都是0，最后留一个位置作为\0
            // 如果read返回值为0，意味着子进程关闭文件描述符了，相当于读到文件结尾了
            if (size > 0)
            {
                buffer[size] = 0;
                printf("parent get messge from child# %s\n", buffer);
            }
            else if (size == 0)
            {
                printf("pipe file close, child quit!\n");
                break;
            }
            else
            {
                break;
            }
        }

        int status = 0;
        if (waitpid(id, &status, 0) > 0)
        {
            printf("child quit, wait success!, sig: %d\n", status & 0x7F);
        }
        close(pipe_fd[0]);
    }
    return 0;
}

这里是子进程写入，父进程读取，子进程每1s写入一个x，父进程每1s读取一个x。

如果只写不读（求管道的大小）

所以如果我们需要知道管道的大小，写一个程序算一下就行。

这里管道的大小是64KB

方法：将之前代码中的父进程（读取端）sleep（100）,让自进程一直写，最后我们会发现它停止在65536，因为管道满了，写端被阻塞，需要等读端来读

（3）.匿名管道五个特点

1.管道是一个只能单向通信的通信信道，这里父进程有一个读端和一个写端，这样子进程继承下去才可以读写，如果只有一个读端，那么子进程也就只能读了。因为是单向通信，所以父进程一次只能开一个写端或者一个读端，子进程也是。（要么父写子读，要么子写父读）

2.管道是面向字节流的（也就是读取数据的时候只有字节的概念，你让我读多少个字节就读多少个，具体哪部分有用等读进来到用户层面处理）

3.管道自带同步机制（写端写满了管道，就不写了，等对方读；读端读完了管道内容，就不读了，等对方写）

原子性写入/读取（如果写满之后，只读一点点数据，是不能唤醒对方来写的，要读一定的数据量以后，才能唤醒对方来写，这个数据量就是PIPE_BUF。同理只写一点点数据，也无法唤醒对方来读）

当要写入的数据量不大于PIPE_BUF时，linux将保证写入的原子性。
当要写入的数据量大于PIPE_BUF时，linux将不再保证写入的原子性。

4.仅限于父子间通信（具有血缘关系的进程进行进程间通信）

5.管道的生命周期是随进程的（进程结束后，管道作为文件会被OS自动关闭，即使没有close）

（4）.匿名管道的四种情况

管道的四种情况：

当没有数据可读时

O_NONBLOCK disable：read调用阻塞，即进程暂停执行，一直等到有数据来到为止。

//O_NONBLOCK enable：read调用返回-1，errno值为EAGAIN。（非阻塞式）

当管道满的时候

O_NONBLOCK disable： write调用阻塞，直到有进程读走数据

//O_NONBLOCK enable：调用返回-1，errno值为EAGAIN（非阻塞式）

如果所有管道写端对应的文件描述符被关闭，则read返回0，表明读到文件结尾
如果所有管道读端对应的文件描述符被关闭，则write操作会让OS给目标进程发送信号SIGPIPE，终止写入进程

----（我们可以验证，父进程读，子进程写入；父进程关闭读端，此时操作系统会向进行写操作的进程发出SIGPIPE信号，从而使子进程异常终止。此时父进程通过waitpid获取子进程的status，从status中获取退出码和退出信号）

3.命名管道

为了解决匿名管道只能父子通信，引入了命名管道。

命名管道让两个毫不相关的进程进行通信。

（1）.命名管道的原理/实质

进程是具有独立性的

->进程通信的成本其实比较高

->必须先解决一个问题

->让不同的进程先要看到同一份资源(内存文件，内存，队列)[一定需要OS来提供]

->pipe本质:是通过子进程继承父进程资源的特性，达到一个让不同的进程看到同一份资源

如果是两个不相关的进程，我们要通信可以创建一个文件来做到两个进程间的通信（我们标识一个磁盘文件的时候，可以用路径/文件名来标识，因为操作系统的文件结构是树形结构，每个叶子结点向上追溯到根节点的路径是唯一的）

A进程把内容写入文件temp.txt，B进程从temp.txt中读取，这就实现了进程间通信。但是这种方法很慢，我们可以将文件放在内存中，不要放在磁盘中，这样就会更加快速，A和B同时打开这个放在内存中的文件

所以我们需要一个文件，

1.它被打开的时候，不会把数据刷新到磁盘里，而是保存在内存中

2.在内存中也有一个文件名，方便两个进程通过路径+文件名看到这个文件。

这样的文件就是命名管道（命名的意思是必须有名字，为了让两个进程可以通过同一个路径+文件名找到同一个文件）

（2）.在命令行中创建使用匿名管道

p表示管道文件

使用mkfifo创建一个命名管道，会出现一个类型为p的文件，也就是我们创建的命名管道

一个进程往命名管道中写入内容，另一个进程可以从管道文件中读取数据，这里写了一个shell脚本

while:; do echo "zebra的数据"; sleep 1; done > namedPipe

（3）.代码中创建使用命名管道

1）.同时编译多个文件，makefile

all:client server

client:client.c
	gcc -o $@ $^

server:server.c
	gcc -o $@ $^

.PHONY:clean
clean:
	rm -f client server fifo

2）.mkfifo()函数

int mkfifo(const char *filename,mode_t mode);

filename表示管道的文件名（可以加上路径），mode表示创建的管道文件的权限

1.在server.c里面调用mkfifo创建命名管道文件，权限设置为0666（注意这里需要设置一下umask，否则会受到系统默认umask的影响，默认是002）

如果创建失败（比如同名管道文件已经存在），就打印出错误信息。

#define MY_FIFO "./fifo"
    umask(0);
    if(mkfifo(MY_FIFO, 0666) < 0){
        perror("mkfifo");
        return 1;
    }
    //只需要文件操作即可，打开文件读
    int fd = open(MY_FIFO, O_RDONLY);
    if(fd < 0){
        perror("open");
        return 2;
    }

2.一旦我们有了命名管道。此时，我们只需要让通信双方按照文件操作即可（推荐使用系统调用接口，没有用户层缓冲区的问题）

3.在client.c里面不需要再创建管道文件，直接打开文件开写就行。

4.因为命名管道也是基于字节流的，所以实际上，信息传递的时候，是需要通信双方定制“协议的”，这里暂时不考虑协议相关问题。

3）.e.g.

实现一个让client从键盘读入数据，并向管道中写入内容，让server从命名管道中读取文件内容。

这里在server里面加了一些处理逻辑，如果server读到的内容是show，就创建子进程执行ls -l命令，如果读到的内容是run，就创建子进程执行sl命令；如果读到的是其他内容，就直接将内容打印出来。

server.c:

#include <string.h>
#include <unistd.h>
#include <stdlib.h>
#include <sys/wait.h>
#include <stdio.h>
#include <unistd.h>
#include <sys/stat.h>
#include <sys/types.h>
#include <fcntl.h>

#define MY_FIFO "./fifo"
int main()
{
    umask(0);
    if(mkfifo(MY_FIFO, 0666) < 0){
        perror("mkfifo");
        return 1;
    }

    //只需要文件操作即可
    int fd = open(MY_FIFO, O_RDONLY);
    if(fd < 0){
        perror("open");
        return 2;
    }

    //业务逻辑,可以进行对应的读写了
    while(1){
        char buffer[64] = {0};
        sleep(1);
        ssize_t s = read(fd, buffer, sizeof(buffer)-1); //键盘输入的时候，\n也是输入字符的一部分
        if(s > 0){
            //success
            buffer[s] = 0;
            if(strcmp(buffer, "show") == 0){  //如果输入show，创建子进程执行ls -l命令
                if(fork() == 0){
                    execl("/usr/bin/ls", "ls", "-l", NULL);
                    exit(1);
                }

                waitpid(-1, NULL, 0);
            }
            else if(strcmp(buffer, "run") == 0){  //如果输入run，创建子进程执行sl命令
                if(fork() == 0){
                    execl("/usr/bin/sl", "sl", NULL);
                }
                waitpid(-1, NULL, 0);
            }
            else{
                printf("client# %s\n", buffer);
            }
        }
        else if(s == 0){
            //peer close
            printf("client quit ...\n");
            break;
        }
        else{
            //error
            perror("read");
            break;
        }
    }

    close(fd);
    return 0;
}

client.c:

#include <string.h>
#include <stdio.h>
#include <unistd.h>
#include <sys/stat.h>
#include <sys/types.h>
#include <fcntl.h>

#define MY_FIFO "./fifo"
int main()
{
    //用不用在创建fifo?? 我只要获取即可
    int fd = open(MY_FIFO, O_WRONLY); //不需要O_CREAT
    if(fd < 0){
        perror("open");
        return 1;
    }

    //业务逻辑
    while(1){
        printf("请输入# ");
        fflush(stdout);
        char buffer[64] = {0};
        //先把数据从标准输入拿到我们的client进程内部
        ssize_t s = read(0, buffer, sizeof(buffer)-1);
        if(s > 0){
			// //获取到数据以后，需要把最后一个字符置为\0（‘\0’就是0，这里去掉最后一个字符，并设置为\0）
            buffer[s-1] = 0;
            printf("%s\n", buffer);

            //拿到了数据
            write(fd, buffer, strlen(buffer)); //这里不需要-1，因为是写入数据，操作系统不需要最后/0作为标识符，C语言中的字符串才需要
        }
    }

    close(fd);
    return 0;
}

运行结果：

（4）.命名管道注意事项

1.我们ls -l可以看到，我们让server进程sleep，然后client进程不断输入内容，但是此时管道文件的大小并没有发生变化，一直是0，因为命名管道的数据不会刷新到磁盘，在内存中放着。（ls指令查看的是磁盘中的文件信息）

2.命名管道必须要有名字，因为它需要保证两个进程可以通过路径+文件名共同看到同一个文件。

匿名管道pipe不需要名字，打开两个fd，指向一块内核文件缓冲区用于通信，匿名管道没有文件实体，有名管道有文件实体

因为匿名管道是通过父子继承的方式，子进程的file_struct里面也会有两个fd，分别指向读端和写端，此时我们只需要关闭一个用一个就行。

3.为什么叫fifo？mkfifo？

因为管道文件是遵循先进先出的原则的，先写入的数据，会被先读取。

4.匿名管道和命名管道的区别与联系

联系：

1.都是基于文件的通信方式

2.两者只能用于数据的单向传输，如果要用命名管道实现两个进程间数据的双向传输，建议使用两个单向的命名管道。（todo??）

3.两者虽然都是基于文件的，但是管道中的内容都不会像普通文件一样保存在磁盘中，读取过的数据就会失效，不能重复读取

区别：

1.匿名管道没有文件实体，命名管道有文件实体（保存在内存中，不会写入磁盘）

2.匿名管道pipe不需要名字，打开两个fd，指向一块内核文件缓冲区用于通信。因为匿名管道是通过父子继承的方式，子进程的file_struct里面也会有两个fd，分别指向读端和写端，此时我们只需要关闭一个用一个就行

3.匿名管道只能用于有血缘关系，也就是有公共祖先的进程通信。命名管道可以用于任意进程间的通信。

_Zebra

关注

1
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
Linux操作系统~匿名管道和命名管道的使用及其原理分析

1.创建子进程的时候，PCB也是要自己有一份的，同样里面的files_struct也是要自己独立有一份的（这些都属于进程的数据结构，进程是具有独立性的）2.而通过文件描述符找到的struct_file则是不需要给子进程拷贝一份的，因为这个是属于文件的，和创建进程没有关系。3.调用write方法的时候，是系统调用，会先将数据放在文件的内核缓冲区（不是C语言层面的缓冲区），底层定期的将缓冲区中的内容写到磁盘中。
复制链接

扫一扫