【Linux进程间通信】匿名管道

【Linux进程间通信】匿名管道

目录

  • 【Linux进程间通信】匿名管道
      • 进程间通信介绍
        • 进程间通信目的
        • 进程间通信发展
        • 进程间通信分类
    • 管道
        • 用fork来共享管道原理
        • 站在文件描述符角度——深度理解管道
        • 站在内核角度——管道本质
      • 匿名管道
        • 在myshell中添加管道的实现:
        • 管道读写规则
        • 管道特点

作者:爱写代码的刚子

时间:2023.11.21

前言:本篇博客将会介绍匿名管道的运用

进程间通信介绍

前言:因为进程独立性的存在,导致进程通信的成本比较高。为什么要进行进程间通信?基本数据,发送命令,某种协同,通知。

进程间通信目的
  • 数据传输:一个进程需要将它的数据发送给另一个进程

  • 资源共享:多个进程之间共享同样的资源。

  • 通知事件:一个进程需要向另一个或一组进程发送消息,通知它(它们)发生了某种事件(如进程终止时要通知父进程)。

  • 进程控制:有些进程希望完全控制另一个进程的执行(如Debug进程),此时控制进程希望能够拦截另一个进程的所有陷入和异常,并能够及时知道它的状态改变。

a. 进程间通信的本质:必须让不同的进程看到同一份“资源”

b. “资源”?特定形式的内存空间

c. 这个“资源”由操作系统提供,为什么不是我们两个进程中的一个呢?假设一个由一个进程提供,这个资源被这个进程独有,破坏进程独立性。

d. 我们进程访问这个空间,进行通信,本质就是访问操作系统!进程代表的就是用户,“资源”从创建,使用(一般),释放,都是调用系统调用接口!从底层设计,从接口设计,都要由操作系统独立设计。一般操作系统会有一个独立的通信模块——隶属于文件系统——IPC通信模块定制标准(进程间通信是有标准的)——System V &&posix

进程间通信发展
  • 管道

  • System V进程间通信

  • POSIX进程间通信

进程间通信分类

管道

  • 匿名管道pipe
  • 命名管道

System V IPC

  • System V 消息队列

  • System V 共享内存

  • System V 信号量

POSIX IPC

  • 消息队列

  • 共享内存

  • 信号量

  • 互斥量

  • 条件变量

  • 读写锁

管道

  • 管道是Unix中最古老的进程间通信的形式。

  • 我们把从一个进程连接到另一个进程的一个数据流称为一个“管道“

在这里插入图片描述

  • who | wc -l统计在云端服务器中的用户个数。

管道打开的是内存级文件(管道就是文件),每个文件有着对应的缓冲区,不同进程打开同一个文件时存在引用计数来进行控制。

管道并不支持同时读写!

回顾文件系统
在这里插入图片描述

无论对文件怎么读写,首先都需要将文件加载到内存中。既然如此,我们也可以创建一个内存级文件(技术上可行)。

注意!!!!!,如果该进程创建了子进程,子进程中的struct file*fd_arry数组中存放相同的指针,但是指向的文件相同!!!!

在这里插入图片描述

  • 所以存在引用计数解决父进程关闭子进程仍然在读取文件的情况。
用fork来共享管道原理

在这里插入图片描述

站在文件描述符角度——深度理解管道

在这里插入图片描述

  • 注意,如果两个进程间没有关系(看不到同一份资源),就不能用上述方法进行通信,如果要通信,则需要采用下面匿名管道的方法。

  • 所以要想进行上述通信,进程间必须是父子关系,兄弟关系,爷孙关系…(血缘关系,常用于父子关系)

站在内核角度——管道本质

在这里插入图片描述

  • 【问题】:管道只能单向通信,如果我们需要进行双向通信呢?(建立多个管道)

  • 至此进程间通信了吗?没有,只是建立了通信信道——为什么怎么费劲??——进程具有独立性,通信是有成本的!!!

匿名管道

#include <unistd.h>

功能:创建一无名管道

原型

int pipe(int fd[2]);int fd[2]为输出型参数,将文件的文件描述符数字带出来,让用户使用!!(pipefd[0]:读下标,pipefd[1]:写下标

参数

fd:文件描述符数组,其中fd[0]表示读端, fd[1]表示写端

返回值:成功返回0,失败返回错误代码

在这里插入图片描述

  • 简单的代码示例:

示例一:查看pipefd数组的值

在这里插入图片描述

一般来说==pipefd[0]为读,pipefd[1]为写==。

示例二:子进程打印数据父进程读取数据:

示例代码:

#include <iostream>
#include <unistd.h>
#include <cstdlib>
#include <string>
#include <cstdio>
#include <sys/wait.h>
#include <string.h>
#define N 2
#define NUM 1024

using namespace std;

void Writer(int wfd)
{
    string s = "hello";
    pid_t self = getpid();
    int number = 0;

    char buffer[NUM];
    while(true)
    {
        buffer[0]=0;//字符串清空,将这个数组当作字符串
        snprintf(buffer,sizeof(buffer),"%s-%d-%d",s.c_str(),self,number++);

        write(wfd,buffer,strlen(buffer));//strlen(buffer)不需要加1,c语言规定的‘\0’不关文件的事,只需要文件内容即可
        sleep(1);
    }
}

void Reader(int rfd)
{
    char buffer[NUM];
    while(true)
    {
        buffer[0] = 0;
        ssize_t n = read(rfd,buffer,sizeof(buffer));//注意 sizeof != strlen,管道满了怎么办?管道有面向字节流概念,之后学习网络会提到(定协议去区分)。
        if(n > 0)
        {
            buffer[n] = 0;// 0 == '\0'当作字符串
            cout<< "父进程得到了一个消息:"<< getpid() << "]#" << buffer <<endl;
        }
    }
}

int main()
{
    int pipefd[N] = {0};
    int n = pipe(pipefd);
    if(n<0)return 1;

    cout << "pipefd[0]:" << pipefd[0] << ", pipefd[1]:  "<<pipefd[1] << endl;

    pid_t id = fork();
    if(id < 0) return 2;
    if(id == 0)
    {
        //子进程
        close(pipefd[0]);//关闭读

        //IPC code
        Writer(pipefd[1]);

        close(pipefd[1]);
        exit(0);
    }
    //父进程
    close(pipefd[1]);//关闭写

    //IPC code
    Reader(pipefd[0]);

    pid_t rid = waitpid(id,nullptr,0);
    if(rid < 0) return 3;
    close(pipefd[0]);  
    return 0;
}

结果:

在这里插入图片描述

  • 父子进程在对同一份数据进行访问时,这份资源是多执行流共享的,难免会出现访问冲突的问题。(临界资源竞争的问题)但是父子进程会进行协同。对于管道文件会发生同步与互斥————保护管道文件的数据安全。

  • 同时子进程向管道中写入的都是字符,父进程进行读取时也是字符,所以不会出换行的情况。(忽视分隔符等特殊符号,就相当于字节)(管道是面向字节流的)

总结:

管道的特征:

  1. 具有血缘关系的进程进行进程间通信
  2. 管道只能单向通信
  3. 父子进程是会进程协同的,同步与互斥——保护管道文件的数据安全(多线程)
  4. 管道是有固定大小的(会被写满,但是在不同的内核里大小不同)
  5. 管道是面向字节流的(网络)
  6. 管道是基于文件的,而文件的生命周期是随进程的
  • ulimit -a查看相关的限制(open files表示单个进程最多打开文件的个数 )

在这里插入图片描述

  • man 7 pipe查看管道大小

在这里插入图片描述

  • 官方文档中说了,如果读取的数据小于PIPE_BUF,读取操作就必须是原子的
在myshell中添加管道的实现:

思路:

  • 分析输入的命令行字符串,获取有多少个|, 命令打散多个子命令字符串

  • malloc申请空间,pipe先申请多个管道

  • 循环创建多个子进程,每一个子进程的重定向情况。最开始. 输出重定向, 1->指定的一个管道的写端

  • 中间:输入输出重定向, 0标准输入重定向到上一个管道的读端 1标准输出重定向到下一个管道的写端

  • 最后一个:输入重定向,将标准输入重定向到最后一个管道的读端

  • 分别让不同的子进程执行不同的命令— exec* — exec*不会影响该进程曾经打开的文件,不会影响预先设置好的管道重定向

管道读写规则

管道的4中情况:

  1. 读写端正常,管道如果为空,读端就要阻塞
  2. 读写端正常,管道如果被写满,写端就要阻塞
  3. 读端正常读,写端关闭,读端就会读到0,表明读到了文件(pipe)结尾,不会被阻塞
  4. 写端是正常写入,读端关闭了。操作系统就要杀掉正在写入的进程。(通过信号干掉)
  • 当没有数据可读时

    • O_NONBLOCK disable:read调用阻塞,即进程暂停执行,一直等到有数据来到为止。
    • O_NONBLOCK enable:read调用返回-1,errno值为EAGAIN。
  • 当管道满的时候

    • O_NONBLOCK disable: write调用阻塞,直到有进程读走数据
    • O_NONBLOCK enable:调用返回-1,errno值为EAGAIN
  • 如果所有管道写端对应的文件描述符被关闭,则read返回0

  • 如果所有管道读端对应的文件描述符被关闭,则write操作会产生信号SIGPIPE,进而可能导致write进程退出

  • 当要写入的数据量不大于PIPE_BUF时,linux将保证写入的原子性。

  • 当要写入的数据量大于PIPE_BUF时,linux将不再保证写入的原子性。

管道特点

只能用于具有共同祖先的进程(具有亲缘关系的进程)之间进行通信;通常,一个管道由一个进程创

建,然后该进程调用fork,此后父、子进程之间就可应用该管道。

管道提供流式服务

一般而言,进程退出,管道释放,所以管道的生命周期随进程

一般而言,内核会对管道操作进行同步与互斥

管道是半双工的,数据只能向一个方向流动;需要双方通信时,需要建立起两个管道


本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/371123.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

【iOS ARKit】环境反射

环境反射 在使用 iOS AR中 渲染虚拟物体时&#xff0c;RealityKit 默认使用了一个简单的天空盒&#xff08;Skybox&#xff0c;即IBL环境资源贴图&#xff09;&#xff0c;所有带反射材质的物体默认会对天空盒产生反射。 但在AR 中&#xff0c;使用IBL 技术实现的天空盒反射有一…

【快速上手QT】01-QWidgetQMainWindow QT中的窗口

总所周知&#xff0c;QT是一个跨平台的C图形用户界面应用程序开发框架。它既可以开发GUI程序&#xff0c;也可用于开发非GUI程序&#xff0c;当然我们用到QT就是要做GUI的&#xff0c;所以我们快速上手QT的第一篇博文就讲QT的界面窗口。 我用的IDE是VS2019&#xff0c;使用QTc…

神经网络 | 基于 CNN 模型实现土壤湿度预测

Hi&#xff0c;大家好&#xff0c;我是半亩花海。在现代农业和环境监测中&#xff0c;了解土壤湿度的变化对于作物生长和水资源管理至关重要。通过深度学习技术&#xff0c;特别是卷积神经网络&#xff0c;我们可以利用过去的土壤湿度数据来预测未来的湿度趋势。本文将使用 Pad…

Postgresql体系结构

client连接PostgreSQL过程&#xff1a; 1、客户端发起请求 2、主服务postmaster进程负责服务器是否接受客户端的host通信认证&#xff0c;服务器对客户端进行身份鉴别 3、主服务进程为该客户端单独fork一个客户端工作进程postgres 4、客户端与postgres进程建立通信连接&#xf…

【算法与数据结构】647、516、LeetCode回文子串+最长回文子序列

文章目录 一、647、回文子串二、516、最长回文子序列三、完整代码 所有的LeetCode题解索引&#xff0c;可以看这篇文章——【算法和数据结构】LeetCode题解。 一、647、回文子串 思路分析&#xff1a;判断一个字符串是否为回文串那么必须确定回文串的所在区间&#xff0c;而一维…

SQL--DDL

全称 Structured Query Language&#xff0c;结构化查询语言。操作关系型数据库的编程语言&#xff0c;定义了 一套操作关系型数据库统一标准。 1 SQL通用语法 在学习具体的SQL语句之前&#xff0c;先来了解一下SQL语言的同于语法。 1). SQL语句可以单行或多行书写&#xff0…

处理SERVLET中的错误和异常

处理SERVLET中的错误和异常 应用服务器服务客户机请求时可能会遇到一些问题,如找不到所请求的资源或运行中的servlet引发异常。例如,在线购物门户中如果用户选择了当前缺货的物品要放入购物车中,就会出现问题, 这种情况下,浏览器窗口中将显示错误消息。您可以在servlet中…

Maven工程的配置及使用

一、Maven章节 Maven 是 Apache 软件基金会组织维护的一款专门为 Java 项目提供构建和依赖管理支持的工具 1.1、maven的作用 1&#xff09;依赖管理&#xff1a; 方便快捷的管理项目依赖的资源包&#xff08;jar包&#xff09;避免版本冲突 2&#xff09;统一项目结构&…

STC系列单片机的中断系统

目录 一、中断系统的定义 二、STC15系列单片机的中断请求源及结构图 三、中断查询表以及触发方式 四、在keil c中如何声明中断函数 五、外部中断 六、基于STC15芯片实战中断系统的使用 &#xff08;1&#xff09;外部中断2/外部中断3来检测门的开关状态 &#xff08;2&a…

【C++】- 继承(继承定义!!基本格式!切片概念!!菱形继承详解!)

继承 了解继承继承的定义基类和派生类对象赋值转换继承中的作用域派生类的默认成员函数继承和友元菱形继承和菱形虚拟继承 了解继承 继承机制是面向对象程序设计使代码可以复用的最重要的手段&#xff0c;它允许程序员在保 持原有类特性的基础上进行扩展&#xff0c;增加功能&a…

优化 IT 支出和消除浪费的 8 种主要方法

不懈追求最佳 IT 支出对于任何组织的长期可持续发展和成功都至关重要。在这个技术快速进步的时代&#xff0c;您必须做出明智的决策&#xff0c;消除浪费&#xff0c;同时最大限度地提高技术投资的价值。 从进行 IT 成本分析到采用敏捷预算和技术标准化&#xff0c;这些策略对…

关于服务器解析A记录和CNAME记录的分析

内容提要: 大致讲下理解,dns域名解析这一块 0 . 问题来源 最近搞了一个七牛云上传,然后需要配置融合cdn加速,也就是可以加速域名,中间有一部需要CNAME 域名,也就是将七牛云提供的域名CNAME一下,查阅资料其实就是起一个别名,好访问而已. 方便我们访问云存储,达到加速的效果. …

Elasticsearch(ES) 简述请求操作索引下文档 增删查改操作

上文 Elasticsearch(ES) 创建带有分词器规则的索引 带着大家创建了一个带有分词功能的索引 老规矩 我们启动一下ES服务 本文 我们就来说说 关于文档的操作 我们先来添加一个文档 就像数据库加一条数据一样 这里 并不需要指定什么表结构和数据结构 它的文档结构是无模式的 添…

es6中标签模板

之所以写这篇文章&#xff0c;是因为标签模板是一个很容易让人忽略的知识点 首先我们已经非常熟悉模板字符串的使用方法 const name "诸葛亮" const templateString hello, My name is ${name}标签模板介绍 这里的标签模板其实不是模板&#xff0c;而是函数调用…

2024年Java面试题大全 面试题附答案详解,BTA内部面试题

基础篇 1、 Java语言有哪些特点 1、简单易学、有丰富的类库 2、面向对象&#xff08;Java最重要的特性&#xff0c;让程序耦合度更低&#xff0c;内聚性更高&#xff09; 阿里内部资料 基本类型 大小&#xff08;字节&#xff09; 默认值 封装类 6、Java自动装箱与拆箱 装箱就是…

《幻兽帕鲁》解锁基地和工作帕鲁数量上限

帕鲁私服的游戏参数通常可通过配置文件 PalWorldSettings.ini 来进行修改&#xff0c;然而这个配置文件有个别参数对游戏不生效&#xff0c;让人很是头疼。没错&#xff01;我说的就是终端最大的帕鲁数量&#xff01; 其实还有另外一种更加高级的参数修改方式&#xff0c;那就…

《Python 网络爬虫简易速速上手小册》第2章:网络爬虫准备工作(2024 最新版)

文章目录 2.1 选择合适的爬虫工具和库2.1.1 重点基础知识讲解2.1.2 重点案例&#xff1a;使用 Scrapy 抓取电商网站2.1.3 拓展案例 1&#xff1a;使用 Requests 和 BeautifulSoup 抓取博客文章2.1.4 拓展案例 2&#xff1a;使用 Selenium 抓取动态内容 2.2 设置开发环境2.2.1 重…

【前沿技术杂谈:开源软件】引领技术创新与商业模式的革命

【前沿技术杂谈&#xff1a;开源软件】引领技术创新与商业模式的革命 开源软件如何推动技术创新开源软件的开放性和协作精神促进知识共享和技术迭代推动关键技术的发展开源软件与新技术的融合 开源软件的商业模式开源软件的商业模式将开源软件与商业软件相结合 开源软件的安全风…

Docker Dockerfile

1、概念介绍 Dockerfile是用来构建Docker镜像的文本文件&#xff0c;是由一条条构建镜像所需的指令和参数构成的脚本。 每条保留字指令都必须为大写字母且后面要跟随至少一个参数 指令按照从上到下&#xff0c;顺序执行 #表示注释 每条指令都会创建一个新的镜像层并对镜像进…

PyTorch 2.2 中文官方教程(十)

使用整体追踪分析的追踪差异 原文&#xff1a;pytorch.org/tutorials/beginner/hta_trace_diff_tutorial.html 译者&#xff1a;飞龙 协议&#xff1a;CC BY-NC-SA 4.0 作者: Anupam Bhatnagar 有时&#xff0c;用户需要识别由代码更改导致的 PyTorch 操作符和 CUDA 内核的变化…