当前位置: 首页 > news >正文

Linux 进程间通信之管道

个人主页:仍有未知等待探索-CSDN博客

专题分栏: Linux

目录

一、通信

1、进程为什么要通信?

1.数据的类型

2.父进程和子进程算通信吗?

2、进程如何通信?

3、进程通信的常见方式?

二、管道 

1、概念

1.管道的4种情况:

2.管道的5种特征:

2、匿名管道

1.为什么父子进程会向同一个显示器终端打印数据?

2.进程默认会打开三个标准输入输出:0,1,2 ?

 3.为什么我们子进程主动close(0/1/2),不影响父进程继续使用显示器文件呢?

4.什么是管道文件?

5.管道文件的特点?

6.管道文件结构图

7.父子既然要关闭不需要的fd,那为什么要打开?

8.可以不关不需要的fd吗?

9.如果想双向通信,怎么办?

10.为什么要单向通信?

11.管道的使用(*)

12.read、write的注意点:

read的返回值:

write:

13.命令行中的管道符号:‘ | ’

14.管道多次创建的示意图(*)

 3、命名管道

1.原理

2.匿名管道和命名管道的区别

3.怎么保证两个毫不相干的进程,打开了同一个文件呢?

4.命名管道操作 --- 系统调用篇

5.命名管道操作 --- 指令篇

三、管道的项目 --- 进程池

process_pool.cc

task.hpp

Makefile


一、通信

1、进程为什么要通信?

进程也是需要某种协同的,所以如何协同的前提是通信。

1.数据的类型

通知就绪的、单纯的要传递的数据、控制相关的信息...

2.父进程和子进程算通信吗?

答案:不算。

1、一直通信能通信不是同一个概念。

2、父子进程只能读父子进程共享的变量内容,而且还不能进行修改,修改了就会发生写时拷贝,数据不一致。

2、进程如何通信?

进程间通信的前提是

让两个进程能同时看到同一份资源(也就是操作系统的一段空间)。

因为不同的进程之间互相是独立的,所以不同的进程独自创建的空间,其他进程是不知道的。所以需要第三方的协助(也就是操作系统)。

但是,操作系统不能被用户直接的访问资源,所以操作系统需要提供对应的系统调用。

如果对于下列的图不明白的话,建议去看看进程相关的知识。

这两篇博客讲的都是和进程相关的内容

Linux 冯诺依曼体系、操作系统、进程概念、进程状态、进程切换-CSDN博客

Linux 进程优先级、程序地址空间、进程控制-CSDN博客

3、进程通信的常见方式?

二、管道 

1、概念

1.管道的4种情况:

1、如果管道内部时空的 && write fd没有关闭,读取条件不具备,读进程会被阻塞 --- wait --- 等到读取条件具备 --- 再进行写入 --- 之后再进行读数据。管道空且写未关,读阻塞

2、如果管道被写满 && 不读且没有关闭,写条件不具备,写进程会被阻塞 --- wait --- 等到写条件具备 --- 写入数据。管道满且读未关,写阻塞

3、管道一直在读&&写端关闭了wfd,读端read返回值会读到0,表示读到文件结尾。读且写关闭,读到文件尾,结束

4、rfd直接关闭,写端wfd一直进行写入。这种管道叫broken pipe,os不做浪费时空的事情,os会杀掉对应的进程,给目标发送(13 SIGPIPE)信号。写且读关闭,写进程被杀掉。

2.管道的5种特征:

1、匿名管道:只能用来进行具有父子进程之间通信。(这里的父子进程是泛泛的,爷孙进程也可以)。

2、管道内部,自带进程之间的同步机制。同步:多执行流执行代码的时候,具有明显的顺序性。

3、管道的生命周期是随进程的

4、管道在通信的时候,是面向字节流的。 write的次数和读取的次数不是一一匹配的。

5、管道的通信模式,是一种特殊的半双工模式。(半双工:在同一时刻,只能有一个方向的数据传输)

2、匿名管道

1.为什么父子进程会向同一个显示器终端打印数据?

因为父子进程代码和数据在没有修改的时候是属于共享的,所以子进程创建的时候,会直接将父进程的task_struct拷贝一份,当然,也包括其中的文件描述符表,所以只要父进程的文件描述符表中存储了标准输入、标准输出、标准错误,子进程也就会有标准输入、标准输出、标准错误。

bash进程可以想象成树形结构的根节点。所以只要将bash的文件描述符表设置好,所有的进程就都会在运行的之后默认打开这三个标准文件。

2.进程默认会打开三个标准输入输出:0,1,2 ?

bash打开了,所有子进程默认也就打开了,我们只需要做好约定即可!

 3.为什么我们子进程主动close(0/1/2),不影响父进程继续使用显示器文件呢?

因为,struct file中也有内存级引用计数。

父子同时打开了显示器文件,所以显示器文件的引用计数为2,当关闭了子进程的显示器文件,引用计数减一,只有当引用计数为0的时候,才会释放资源。

struct file -> ref_count; if (ref_count==0) 释放文件资源。

4.什么是管道文件?

管道文件:管道文件是一种特殊的文件,它存在于内存中,而不是磁盘上。它允许一个进程的输出直接作为另一个进程的输入,从而实现进程间的数据交换和协同工作。

5.管道文件的特点?

  • 管道只允许单向通信。

  • 管道文件不需要刷新到磁盘中(所以需要单独设计通信接口)。

6.管道文件结构图

7.父子既然要关闭不需要的fd,那为什么要打开?

为了让子进程继承下去。

8.可以不关不需要的fd吗?

可以,但是建议关闭,因为可能会误写。

9.如果想双向通信,怎么办?

可以建立两个管道。

一个管道,父读子写;一个管道父写子读。

10.为什么要单向通信?

因为简单,并且保证数据的安全性。

公共资源可能会存在被多个进程同时访问的情况。数据不一致问题。比如说子进程写了一半,父进程就开始读。

11.管道的使用(*)

#include <iostream>
#include <string>
#include <cerrno>  // errno.h
#include <cstring> // string.h
#include <unistd.h>
#include <cstdlib>
#include <sys/types.h>
#include <sys/wait.h>void subprocess_write(int);
void fatherprocess_read(int);// 子写父读
int main()
{// 创建管道int pipefd[2] = {0};int exitcode = pipe(pipefd);std::cout << "pipefd[0]: " << pipefd[0] << " pipefd[1]: " << pipefd[1] << std::endl;// 创建子进程int id = fork();// 子写父读if (id == 0){std::cout << "子进程关闭不需要的fd, 准备发消息" << std::endl;sleep(1);// child// 关闭其他权限close(pipefd[0]);// 子进程写subprocess_write(pipefd[1]);close(pipefd[1]);exit(0);}std::cout << "父进程进程关闭不需要的fd, 准备收消息" << std::endl;sleep(1);// father// 关闭不需要的fdclose(pipefd[1]);// 父进程读fatherprocess_read(pipefd[0]);close(pipefd[0]);pid_t rid = waitpid(id, nullptr, 0);if (rid > 0){std::cout << "wait sucessfully\n" << std::endl;}return 0;
}std::string other()
{static int cnt = 0;std::string messageid = std::to_string(cnt);cnt++;std::string stringid = std::to_string(getpid());std::string message = messageid + " my pid is " + stringid;return message;
}
void subprocess_write(int wfd)
{std::string message = "i am child: ";while (true){std::string info = message + other();write(wfd, info.c_str(), info.size());// 写入管道的时候没有写入'\0'sleep(1);}
}
void fatherprocess_read(int rfd)
{char inbuffer[1024] = {0};while (true){std::cout << "---------------------------------" << std::endl;ssize_t n = read(rfd, inbuffer, sizeof(inbuffer) - 1);if(n > 0){inbuffer[n] = 0;std::cout  << inbuffer << std::endl;}else if (n == 0){std::cout << "读端关闭" << std::endl;break;}else {std::cout << "读入失败" << std::endl;break;}}
}

12.read、write的注意点:

read的返回值:
  • 返回值 > 0,读取成功,且返回值是读取的字节数。
  • 返回值 = 0,读取结束。写端关闭,导致读端读到文件尾结束。
  • 返回值 < 0,读取失败。
write:

如果每次写的数据的大小 小于 pipe_buf(<= 512Byte,在Linux中是4096Byte),写入操作的过程是原子的。(原子的意思就是不可再分,证明这个操作是线程安全的)

13.命令行中的管道符号:‘ | ’

命令行中的 |,就是匿名管道,‘|’ 左侧命令的stdout 作为 右侧命令的stdin。

14.管道多次创建的示意图(*)

创建了两个管道:

创建了三个管道:

 3、命名管道

1.原理

是不是感觉很眼熟,和匿名管道的文件结构图差不多,其实就是差不多。

只不过这两个管道有一个非常显著的不同。

2.匿名管道和命名管道的区别

  • 匿名管道:两个通信的进程之间是有血缘关系的。(父子进程,爷孙进程...)
  • 命名管道:两个通信的进程之间没有血缘关系。
  • 匿名管道:不需要文件路径。
  • 命名管道:需要文件路径。

3.怎么保证两个毫不相干的进程,打开了同一个文件呢?

通过文件的路径来确认。每一个文件,都有文件路径(唯一性)。

4.命名管道操作 --- 系统调用篇

5.命名管道操作 --- 指令篇

三、管道的项目 --- 进程池

有 n 个管道,n 个任务,要保证每条管道都负载均衡。

process_pool.cc


#include "Task.hpp"// 父进程写,子进程读
class Channel
{
private:int _wfd;int _id;public:Channel(int wfd, int id): _wfd(wfd), _id(id){}void close_subprocess(){close(_wfd);}int get_wfd(){return _wfd;}int get_id(){return _id;}
};void work(int rfd);
void create_ChannelAndSubprocess(std::vector<Channel> *channels, int child_number, work_t work);
int next_channel(std::vector<Channel> &channels);
void send_command(Channel &channel, int option_task);
void ctrl_channel(std::vector<Channel> &channels);
void clean_ChannelAndSubprocess(std::vector<Channel> *channels);
int main(int argv, char* argc[])
{std::vector<Channel> channels;load_task();if (argv != 2)return -1;int num = std::stoi(argc[1]);// 1、创建信道和子进程create_ChannelAndSubprocess(&channels, num, work);// 2、通过信道控制子进程ctrl_channel(channels);// 3、回收管道和子进程clean_ChannelAndSubprocess(&channels);return 0;
}void create_ChannelAndSubprocess(std::vector<Channel> *channels, int child_number, work_t work)
{for (int i = 0; i < child_number; i++){int pipefd[2] = {0};int exit_code = pipe(pipefd);if (exit_code < 0){std::cout << "errno : " << exit_code << std::endl;exit(1);}pid_t id = fork();if (id == 0){// child;close(pipefd[1]);work(pipefd[0]);exit(0);}// fatherclose(pipefd[0]);(*channels).emplace_back(pipefd[1], id);}std::cout << "创建了:" << channels->size() << "个信道和子进程" << std::endl;
}
int next_channel(std::vector<Channel> &channels)
{static int count = 0;int option = count;count++;count %= channels.size();return option;
}
void send_command(Channel &channel, int option_task)
{write(channel.get_wfd(), &option_task, sizeof(option_task));
}
void ctrl_channel(std::vector<Channel> &channels)
{// 选择任务srand(time(nullptr));int n = task_number;while (n -- ){int option_task = rand() % task.size(); // task[option_task]// 选择信道int option_channel = next_channel(channels); // channels[option_task]// 发送任务send_command(channels.at(option_channel), option_task);sleep(1);}
}
void clean_ChannelAndSubprocess(std::vector<Channel> *channels)
{for (auto& channel:*channels){channel.close_subprocess();}for (auto& channel:*channels){waitpid(channel.get_id(), 0, 0);}
}

task.hpp

#pragma once#include <iostream>
#include <vector>
#include <string>
#include <cstring>
#include <unistd.h>
#include <cstdlib>
#include <ctime>
#include <sys/types.h>
#include <sys/wait.h>typedef void (*task_t)();
typedef void (*work_t)(int);const int size = 4096;
const int task_number = 7;
// 加载
void download()
{std::cout << "This is a downlaod task!" << std::endl;
}
// 打印
void print()
{std::cout << "This is a print task!" << std::endl;
}
// 刷新
void flush()
{std::cout << "This is a flush task!" << std::endl;
}std::vector<task_t> task;void load_task()
{task.push_back(download);task.push_back(print);task.push_back(flush);
}
void excute_task(int option_task)
{if (option_task < 0 || option_task >= task.size())return;task.at(option_task)();
}void work(int rfd)
{int t = task_number;int option_task = 0;int n = read(rfd, &option_task, sizeof(option_task));if (n > 0){excute_task(option_task);std::cout << "--------------------------------" << std::endl;}
}

Makefile

process_pool:process_pool.ccg++ $^ -o $@ -std=c++11.PHONY:clean
clean:rm -rf process_pool

谢谢大家!

相关文章:

Linux 进程间通信之管道

个人主页&#xff1a;仍有未知等待探索-CSDN博客 专题分栏&#xff1a; Linux 目录 一、通信 1、进程为什么要通信&#xff1f; 1.数据的类型 2.父进程和子进程算通信吗&#xff1f; 2、进程如何通信&#xff1f; 3、进程通信的常见方式&#xff1f; 二、管道 1、概念…...

IDEA 无法启动,点击之后没有任何提示或者界面

当你尝试通过双击或以管理员身份启动程序时&#xff0c;均未能成功&#xff0c;且未收到任何提示信息或界面反馈&#xff0c;这确实令人困扰。为了诊断问题并获取有用的错误信息&#xff0c;你可以按照以下步骤操作&#xff1a; 1. 启用并查看错误信息 首先&#xff0c;你需要…...

ctf 堆栈结构

CTF&#xff08;Capture The Flag&#xff09;竞赛中&#xff0c;理解堆栈结构对于解决涉及二进制分析、逆向工程和利用开发的挑战至关重要。堆栈是在程序执行过程中用于临时存储数据和管理函数调用的关键数据结构。以下是堆栈结构的基本概念及其在CTF竞赛中的应用&#xff1a;…...

sqlserver的openquery配置

1.命令Demo ---openquery--开启Ad Hoc Distributed Queries组件&#xff0c;在sql查询编辑器中执行如下语句exec sp_configure show advanced options,1reconfigureexec sp_configure Ad Hoc Distributed Queries,1reconfigure--关闭Ad Hoc Distributed Queries组件&#xff0…...

Spring boot logback日志框架加载初始化源码

##LoggingApplicationListener监听 Overridepublic void onApplicationEvent(ApplicationEvent event) {if (event instanceof ApplicationStartingEvent) {onApplicationStartingEvent((ApplicationStartingEvent) event);}else if (event instanceof ApplicationEnvironment…...

qt-11基本对话框(消息框)

基本对话框--消息框 msgboxdlg.hmsgboxdlg.cppmain.cpp运行图QustionMsgInFormationMsgWarningMsgCriticalMsgAboutMsgAboutAtMsg自定义 msgboxdlg.h #ifndef MSGBOXDLG_H #define MSGBOXDLG_H#include <QDialog> #include <QLabel> #include <QPushButton>…...

Windows11下wsl闪退的解决

wsl闪退 1. 原因分析 解释&#xff1a;WSL&#xff08;Windows Subsystem for Linux&#xff09;闪退通常指的是在Windows操作系统中运行的Linux环境突然关闭。这可能是由于多种原因造成的&#xff0c;包括系统资源不足、WSL配置问题、兼容性问题或者是Linux内核的问题。&…...

通过调整JVM的默认内存配置来解决内存溢出(‌OutOfMemoryError)‌或栈溢出(‌StackOverflowError)‌等错误

文章目录 引言I 调整JVM的默认堆内存配置java命令启动jar包Tomcat服务器部署java应用引言 问题: org.springframework.web.util.estedServletException: Handlerdispatch failed: nested exception isjava.lang.0utOfMemoryError: Java heap space原因分析: 查询查询平台所…...

RCE---eval长度限制绕过技巧

目录 题目源码 方法一&#xff1a;命令执行的利用 方法二&#xff1a;file_put_contents&#xff08;本地文件包含的利用&#xff09; 方法三&#xff1a;usort(…$_GET); 题目源码 <?php $param $_REQUEST[param]; if(strlen($param)<17 && stripos($par…...

C++11标准模板(STL)- 算法库 - 类似 std::accumulate,但不依序执行 -(std::reduce)

算法库 算法库提供大量用途的函数&#xff08;例如查找、排序、计数、操作&#xff09;&#xff0c;它们在元素范围上操作。注意范围定义为 [first, last) &#xff0c;其中 last 指代要查询或修改的最后元素的后一个元素。 类似 std::accumulate&#xff0c;但不依序执行 std…...

反射机制的介绍

什么是反射 Java反射机制是Java语言一个很重要的特性&#xff0c;它使得Java具有了“动态性”。在Java程序运行时&#xff0c;对于任意的一个类&#xff0c;我们能不能知道这个类有哪些属性和方法呢&#xff1f;对于任意的一个对象&#xff0c;我们又能不能调用它任意的方法&a…...

AI图文带货,手把手教学,傻瓜操作,轻松日入500+,小白教程

通过自媒体的力量&#xff0c;帮助普通人成为企业家。 建立自己的财富事业&#xff0c;用你的影响力帮助更多的人。 从而实现你更加自由的生活方式。 记住关注我&#xff0c;不要错过每一次分享。 对标账号 作为公司的一个项目实际拆解者&#xff0c;最热门的项目怎么能不拆…...

java:实现简单的验证码功能

效果 实现思路 验证码图片的url由后端的一个Controller生成&#xff0c;前端请求这个Controller接口的时候根据当前时间生成一个uuid&#xff0c;并把这个uuid在前端使用localStorage缓存起来&#xff0c;下一次还是从缓存中获取。 Controller生成验证码之后&#xff0c;把前…...

MybatisPlus使用指南

MybatisPlus 1. 快速入门1.1 入门案例1.2 常见注解1.3 常见配置 2. 核心功能2.1 条件构造器2.2 自定义SQL2.3 Service接口 3. 扩展功能3.1 代码生成3.2 静态工具3.3 逻辑删除 4. 插件功能4.1 分页插件4.2 通用分页实体 1. 快速入门 1.1 入门案例 步骤一&#xff1a;引入Mybat…...

5. MongoDB 集合创建、更新、删除

1. 创建集合 1.1 语法 db.createCollection(name, options) 参数说明&#xff1a; name: 要创建的集合名称。options: 可选参数, 指定有关内存大小及索引的选项。 options 可以是如下参数&#xff1a; 参数名类型描述示例值capped布尔值是否创建一个固定大小的集合。truesize…...

PHP中如何将变量从函数传递给acf_add_filter

在PHP开发中&#xff0c;我们有时需要将变量从函数传递给acf的add_filter钩子。这样做可以让我们在acf字段加载时&#xff0c;对字段值进行动态修改。下面&#xff0c;我将详细介绍如何实现这一功能。 在acf中&#xff0c;我们使用add_filter来添加钩子&#xff0c;对字段的加…...

KNN算法的使用

目录 一、KNN 算法简介 二、KNN算法的使用 1.读取数据 2.处理数据 三、训练模型 1.导入KNN模块 2.训练模型 3.出厂前测试 四、进行测试 1.处理数据 2.进行测试 总结 一、KNN 算法简介 KNN 是一种基于实例的学习算法。它通过比较样本之间的距离来进行预测。算法的核心…...

java文件上传

导入jar包&#xff0c;或者maven <!-- https://mvnrepository.com/artifact/commons-fileupload/commons-fileupload --> <dependency><groupId>commons-fileupload</groupId><artifactId>commons-fileupload</artifactId><version>…...

MySQL 数据库经验总结

一、数据库操作 1. 创建数据库 CREATE DATABASE database_name;例如&#xff0c;创建一个名为 my_database 的数据库&#xff1a; CREATE DATABASE my_database;2. 选择数据库 USE database_name;要使用刚才创建的 my_database 数据库&#xff1a; USE my_database;3. 删除…...

Python环境安装及PIP安装(Mac OS版)

官网 https://www.python.org/downloads/ 安装python python-3.12.1-macos11.pkg下载后&#xff0c;安装一直下一步即可 验证是否安装成功&#xff0c;执行python3命令和pip3命令 配置环境变量 获取python3安装位置并配置在.bash_profile #查看python路径 which python3#…...

工业安全零事故的智能守护者:一体化AI智能安防平台

前言&#xff1a; 通过AI视觉技术&#xff0c;为船厂提供全面的安全监控解决方案&#xff0c;涵盖交通违规检测、起重机轨道安全、非法入侵检测、盗窃防范、安全规范执行监控等多个方面&#xff0c;能够实现对应负责人反馈机制&#xff0c;并最终实现数据的统计报表。提升船厂…...

在鸿蒙HarmonyOS 5中实现抖音风格的点赞功能

下面我将详细介绍如何使用HarmonyOS SDK在HarmonyOS 5中实现类似抖音的点赞功能&#xff0c;包括动画效果、数据同步和交互优化。 1. 基础点赞功能实现 1.1 创建数据模型 // VideoModel.ets export class VideoModel {id: string "";title: string ""…...

iPhone密码忘记了办?iPhoneUnlocker,iPhone解锁工具Aiseesoft iPhone Unlocker 高级注册版​分享

平时用 iPhone 的时候&#xff0c;难免会碰到解锁的麻烦事。比如密码忘了、人脸识别 / 指纹识别突然不灵&#xff0c;或者买了二手 iPhone 却被原来的 iCloud 账号锁住&#xff0c;这时候就需要靠谱的解锁工具来帮忙了。Aiseesoft iPhone Unlocker 就是专门解决这些问题的软件&…...

【单片机期末】单片机系统设计

主要内容&#xff1a;系统状态机&#xff0c;系统时基&#xff0c;系统需求分析&#xff0c;系统构建&#xff0c;系统状态流图 一、题目要求 二、绘制系统状态流图 题目&#xff1a;根据上述描述绘制系统状态流图&#xff0c;注明状态转移条件及方向。 三、利用定时器产生时…...

Java线上CPU飙高问题排查全指南

一、引言 在Java应用的线上运行环境中&#xff0c;CPU飙高是一个常见且棘手的性能问题。当系统出现CPU飙高时&#xff0c;通常会导致应用响应缓慢&#xff0c;甚至服务不可用&#xff0c;严重影响用户体验和业务运行。因此&#xff0c;掌握一套科学有效的CPU飙高问题排查方法&…...

推荐 github 项目:GeminiImageApp(图片生成方向,可以做一定的素材)

推荐 github 项目:GeminiImageApp(图片生成方向&#xff0c;可以做一定的素材) 这个项目能干嘛? 使用 gemini 2.0 的 api 和 google 其他的 api 来做衍生处理 简化和优化了文生图和图生图的行为(我的最主要) 并且有一些目标检测和切割(我用不到) 视频和 imagefx 因为没 a…...

QT3D学习笔记——圆台、圆锥

类名作用Qt3DWindow3D渲染窗口容器QEntity场景中的实体&#xff08;对象或容器&#xff09;QCamera控制观察视角QPointLight点光源QConeMesh圆锥几何网格QTransform控制实体的位置/旋转/缩放QPhongMaterialPhong光照材质&#xff08;定义颜色、反光等&#xff09;QFirstPersonC…...

基于PHP的连锁酒店管理系统

有需要请加文章底部Q哦 可远程调试 基于PHP的连锁酒店管理系统 一 介绍 连锁酒店管理系统基于原生PHP开发&#xff0c;数据库mysql&#xff0c;前端bootstrap。系统角色分为用户和管理员。 技术栈 phpmysqlbootstrapphpstudyvscode 二 功能 用户 1 注册/登录/注销 2 个人中…...

零知开源——STM32F103RBT6驱动 ICM20948 九轴传感器及 vofa + 上位机可视化教程

STM32F1 本教程使用零知标准板&#xff08;STM32F103RBT6&#xff09;通过I2C驱动ICM20948九轴传感器&#xff0c;实现姿态解算&#xff0c;并通过串口将数据实时发送至VOFA上位机进行3D可视化。代码基于开源库修改优化&#xff0c;适合嵌入式及物联网开发者。在基础驱动上新增…...

Python实现简单音频数据压缩与解压算法

Python实现简单音频数据压缩与解压算法 引言 在音频数据处理中&#xff0c;压缩算法是降低存储成本和传输效率的关键技术。Python作为一门灵活且功能强大的编程语言&#xff0c;提供了丰富的库和工具来实现音频数据的压缩与解压。本文将通过一个简单的音频数据压缩与解压算法…...