Linux学习记录——사십 高级IO(1)
文章目录
- 1、IO
- 2、同、异步IO(5种IO类型)
- 3、其它高级IO
- 4、非阻塞IO
其它IO类型的实现在这篇之后的三篇
1、IO
input,output。调用read或recv接口时,如果对方长时间不向我方接收缓冲区拷贝数据,我们的进程就只能阻塞,这是读取条件不满足。阻塞的时间成本最后会体现在用户上。因此可以说,IO = 等 + 数据拷贝。高效IO则是单位事件内,等的比重越低,IO效率越高。
可以看出IO是有条件的,满足条件就叫IO时间就绪。
IO有五种模型
2、同、异步IO(5种IO类型)
调用读取用的接口后,对于有自己的接收缓冲区,有5种IO方式
阻塞IO:如果缓冲区内没有好数据,系统调用就一直阻塞等待,不做别的事情,直到准备好数据,才开始读取并返回。所有的套接字默认都是阻塞IO。
非阻塞IO:单次检验缓冲区内没有数据,recv函数就返回EWOULDBLOCK,每隔一段时间再调用recv接口来查看缓冲区,如果有就读取并返回数据,没有就还返回上面的。这也就是非阻塞轮询。
阻塞与非阻塞的区别在于等的方式不同,不过都要自己去拷贝数据。非阻塞在没得到结果前就不阻塞当前进程,直接返回,过一会再来查看;阻塞就是一直阻塞等待,直到读取数据再返回。
上面两个等的方式不同,但拷贝方式相同。
信号驱动IO:缓冲区内有数据时,就发送SIGIO信号通知上层调用接口来读取。信号是告知上层什么时候可以读取的,接口是在信号处理了之后才调用的。
recv函数调用后会先检测有没有数据,也就是条件检测,没有返回,有才读取再返回。像这样的接口只使用一个文件描述符。
多路复用/多路转接IO:执行一个进程,传多个文件描述符,调用多个接口来等待数据,进程只负责等待数据,等到有了数据,也就是IO条件就绪,就通知上层调用recv接口来读取并返回。
多路复用IO是效率最高的,因为并不只是一个进程在等,而是很多个进程在等,那么等待成功的可能性就更高。单个进程等待的概率和多个进程等待的概率相比。
上面4个都是同步IO。
异步IO:不参与等待过程,只是发起一个进程,给一个缓冲区来接收数据。至于结果怎么样,由操作系统来决定。多路复用是进程在等待,异步IO是系统在等待。
两种IO方式的区别是有没有参与等以及读取的过程。实际上,对应到系统,应当是一个进程通过特定的文件描述符,等待IO事件就绪,通过系统调用来读取数据拷贝到上层。
recv函数就是在做条件检测,条件通过再读取。
3、其它高级IO
记录锁、系统V流机制。存储映射IO(mmap),readv和writev函数等
4、非阻塞IO
int main()
{char buffer[64];while(true){printf(">>> ");fflush(stdout);ssize_t n = read(0, buffer, sizeof(buffer) - 1);if(n > 0){buffer[n - 1] = 0;std::cout << "echo# " << buffer << std::endl;}}
}
这就是一个等待的过程,如果我们不输入,就一直卡在read那里。这是阻塞,如果要变成非阻塞,用fcntl接口。
#include <fcntl.h>
int fcntl(int fd, int cmd, …/* arg */);
cmd值有5种
复制一个现有的描述符(cmd=F_DUPFD)
获得/设置文件描述符标记(cmd=F_GETFD或F_SETFD)
获得/设置文件状态标记(cmd=F_GETFL或F_SETFL)//GET获得文件状态标记位,SET设置这个文件新的状态
获得/设置异步I/O所有权(cmd=F_GETOWN或F_SETOWN)
获得/设置记录锁(cmd=F_GETLK,F_SETLK或F_SETLKW)
void SetNonBlock(int fd) {int fl = fcntl(fd, F_GETFL);//使用F_GETFL将当前的文件描述符的属性取出来(这是一个位图)if (fl < 0) {perror("fcntl");return; }fcntl(fd, F_SETFL, fl | O_NONBLOCK);//然后再使用F_SETFL将文件描述符设置回去. 设置回去的同时, 加上一个O_NONBLOCK参数
}
非阻塞和阻塞都是文件的读取方式,在文件结构体中就是一个变量设为1或0,这里的O_NONBLOCK是宏,只有一个比特位,通过fcntl将这个数设置进文件结构体。
#include <iostream>
#include <fcntl.h>
#include <unistd.h>
#include <cstdio>
#include <cstring>void SetNonBlock(int fd)
{int fl = fcntl(fd, F_GETFL);//使用F_GETFL将当前的文件描述符的属性取出来(这是一个位图)if (fl < 0){std::cerr << "error string: " << strerror(errno) << " error code: " << errno << std::endl;return ;}fcntl(fd, F_SETFL, fl | O_NONBLOCK);//然后再使用F_SETFL将文件描述符设置回去. 设置回去的同时, 加上一个O_NONBLOCK参数
}int main()
{char buffer[64];//SetNonBlock(0);//0表示非阻塞while(true){printf(">>> ");fflush(stdout);ssize_t n = read(0, buffer, sizeof(buffer) - 1);if(n > 0){buffer[n - 1] = 0;std::cout << "echo# " << buffer << std::endl;}else if(n == 0){std::cout << "end file" << std::endl;break;} else{std::cout << "read error??" << std::endl;break;} }
}
不设置成0,就是阻塞。read那里不是0而是4,当前没有打开文件描述符为4的文件,就会read error。加上错误原因
else{std::cerr << "read error?" << "error string: " << strerror(errno) << " error code: " << errno << std::endl;break;}
现在再用上SetNonBlock,设置为0,那么即使不输入,也会出错,因为它不阻塞,直接去判断,没输入也没读取完,所以就打印错误语句
那么这里就在每一次循环后sleep一会。只有在输入时才会打印正常语句,不输入就一直打印错误语句。非阻塞IO在底层没有数据时,就以出错形式返回,不过不算正式地出错。
区分一下
else{if(errno == EAGAIN || errno == EWOULDBLOCK)//也就是错误码为11的两个,表示非阻塞式的出错返回{//底层数据没有准备好,下次继续检测sleep(1);std::cout << "data not ready" << std::endl;continue;}else if(errno == EINTR){//这次IO被信号中断,需要重新读取continue;}std::cerr << "read error? " << "error string: " << strerror(errno) << " error code: " << errno << std::endl;break;}
非阻塞IO在没有得到数据之前,可以做别的工作,模拟一下:
#include <iostream>
#include <unistd.h>
#include <fcntl.h>
#include <cstdio>
#include <cstring>
#include <vector>
#include <functional>void PrintLog()
{std::cout << "这个是一个日志例程" << std::endl;
}void OpenMysql()
{std::cout << "这个是一个操作数据库的例程" << std::endl;
}void CheckNet()
{std::cout << "这个是一个检测网络状态的例程" << std::endl;
}using func_t = std::function<void (void)>;
std::vector<func_t> funcs;void LoadTask()
{funcs.push_back(PrintLog);funcs.push_back(OpenMysql);funcs.push_back(CheckNet);
}void HandlerAllTask()
{for(const auto& func: funcs) func();
}void SetNonBlock(int fd)
{int fl = fcntl(fd, F_GETFL);//使用F_GETFL将当前的文件描述符的属性取出来(这是一个位图)if (fl < 0){std::cerr << "error string: " << strerror(errno) << " error code: " << errno << std::endl;return ;}fcntl(fd, F_SETFL, fl | O_NONBLOCK);//然后再使用F_SETFL将文件描述符设置回去. 设置回去的同时, 加上一个O_NONBLOCK参数
}int main()
{char buffer[64];SetNonBlock(0);//0表示非阻塞LoadTask();while(true){printf(">>> ");fflush(stdout);ssize_t n = read(0, buffer, sizeof(buffer) - 1);if(n > 0){buffer[n - 1] = 0;std::cout << "echo# " << buffer << std::endl;}else if(n == 0){std::cout << "end file" << std::endl;break;}else{if(errno == EAGAIN || errno == EWOULDBLOCK)//也就是错误码为11的两个,表示非阻塞式的出错返回{//底层数据没有准备好,下次继续检测HandlerAllTask();sleep(1);std::cout << "data not ready" << std::endl;continue;}else if(errno == EINTR){//这次IO被信号中断,需要重新读取continue;}std::cerr << "read error? " << "error string: " << strerror(errno) << " error code: " << errno << std::endl;break;}sleep(3); }
}
本篇gitee
结束。
相关文章:

Linux学习记录——사십 高级IO(1)
文章目录 1、IO2、同、异步IO(5种IO类型)3、其它高级IO4、非阻塞IO 其它IO类型的实现在这篇之后的三篇 1、IO input,output。调用read或recv接口时,如果对方长时间不向我方接收缓冲区拷贝数据,我们的进程就只能阻塞&a…...
【代码随想录】2
数组篇 二分查找 int search(int* nums, int numsSize, int target) { int left0; int rightnumsSize-1; while(left<right) {int mlddle(leftright)/2;if(nums[mlddle]>target){rightmlddle-1;}else if(nums[mlddle]<target){leftmlddle1;}else{return mlddle;}} r…...
TCP性能分析
ref: TCP性能和发送接收窗口、Buffer的关系 | plantegg...

RibbonGroup 添加QRadioButton
RibbonGroup添加QRadioButton: QRadioButton * pRadio new QRadioButton(tr("Radio")); pRadio->setToolTip(tr("Radio")); groupClipboard->addWidget(pRadio); connect(pRadio, SIGNAL(clicked(…...
一篇文章掌握WebService服务、工作原理、核心组件、主流框架
目录 1、WebService定义 解决问题: 2、WebService的工作原理 2.1 实现一个完整的Web服务包括以下步骤 2.2 调用方式 3、Web Service的核心组件 3.1 XML 3.2 SOAP 3.3 WSDL 3.4 UDDI 4、主流框架 4.1 AXIS(已淘汰) 4.2 XFire 4.3 CXF 5、Soap协议详解…...

观成科技-加密C2框架EvilOSX流量分析
工具简介 EvilOSX是一款开源的,由python编写专门为macOS系统设计的C2工具,该工具可以利用自身释放的木马来实现一系列集成功能,如键盘记录、文件捕获、浏览器历史记录爬取、截屏等。EvilOSX主要使用HTTP协议进行通信,通信内容为特…...

PCL 计算异面直线的距离
目录 一、算法原理二、代码实现三、结果展示四、相关链接本文由CSDN点云侠原创,PCL 计算异面直线的距离,爬虫自重。如果你不是在点云侠的博客中看到该文章,那么此处便是不要脸的爬虫与GPT。 一、算法原理 设置直线 A B AB A...

【数字人】9、DiffTalk | 使用扩散模型基于 audio-driven+对应人物视频 合成说话头(CVPR2023)
论文:DiffTalk: Crafting Diffusion Models for Generalized Audio-Driven Portraits Animation 代码:https://sstzal.github.io/DiffTalk/ 出处:CVPR2023 特点:需要音频对应人物的视频来合成新的说话头视频,嘴部抖…...

完成源示例
本主题演示如何创作和使用自己的完成源类,类似于 .NET 的 TaskCompletionSource。 completion_source 示例的源代码 下面的列表中的代码作为示例提供。 其目的是说明如何编写自己的版本。 例如,支持取消和错误传播不在此示例的范围内。 #include <w…...
业务和流程的关系
背景 概念不清,沟通就容易出现问题,最可怕会出现跑偏情况如何解决,数字化落地过程,程序是死的,最怕灵活,所以在沟通和编码,设计中,很重要的一点就是解决概念,澄清问题&a…...

【河海大学论文LaTeX+VSCode全指南】
河海大学论文LaTeXVSCode全指南 前言一、 LaTeX \LaTeX{} LATEX的安装二、VScode的安装三、VScode的配置四、验证五、优化 前言 LaTeX \LaTeX{} LATEX在论文写作方面具有传统Word无法比拟的优点,VScode作为一个轻量化的全功能文本编辑器,由于其极强的…...

学习python仅此一篇就够了(文件操作:读,写,追加)
python文件操作 文件编码 编码技术即:翻译的规则,记录了如何将内容翻译成二进制,以及如何将二进制翻译回可识别内容。 计算机中有许多可用编码: UTF-8 GBK BUG5 文件的读取操作 open()函数 在pyth…...
vue中 ref 和 $refs的使用
1. 作用 利用 ref 和 $refs 可以用于 获取 dom 元素, 或 组件实例 2. 获取 dom 使用步骤: 2.1 目标标签添加属性 :ref <div ref"chartRef">我是渲染图表的容器</div>2.2 通过$ref:获取标签 mounted() {console.log(this.$re…...

Centos7升级openssl到openssl1.1.1
Centos7升级openssl到openssl1.1.1 1、先查看openssl版本:openssl version 2、Centos7升级openssl到openssl1.1.1 升级步骤 #1、更新所有现有的软件包列表并安装最新的软件包: $sudo yum update #2、接下来,我们需要从源代码编译和构建OpenS…...

uniapp中实现H5录音和上传、实时语音识别(兼容App小程序)和波形可视化
文章目录 Recorder-UniCore插件特性集成到项目中调用录音上传录音ASR语音识别 在uniapp中使用Recorder-UniCore插件可以实现跨平台录音功能,uniapp自带的recorderManager接口不支持H5、录音格式和实时回调onFrameRecorded兼容性不好,用Recorder插件可避免…...

HashMap集合万字源码详解(面试常考)
文章目录 HashMap集合1.散列2.hashMap结构3.继承关系4.成员变量5.构造方法6.成员方法6.1增加方法6.2将链表转换为红黑树的treeifyBin方法6.3扩容方法_resize6.3.1扩容机制6.3.2源码resize方法的解读 6.4 删除方法(remove)6.5查找元素方法(get)6.6遍历HashMap集合几种方式 7.初始…...
LeetCode1124. Longest Well-Performing Interval
文章目录 一、题目二、题解 一、题目 We are given hours, a list of the number of hours worked per day for a given employee. A day is considered to be a tiring day if and only if the number of hours worked is (strictly) greater than 8. A well-performing in…...

如何使用手机公网远程访问本地群辉Video Station中视频文件【内网穿透】
最近,我发现了一个超级强大的人工智能学习网站。它以通俗易懂的方式呈现复杂的概念,而且内容风趣幽默。我觉得它对大家可能会有所帮助,所以我在此分享。点击这里跳转到网站。 文章目录 1.使用环境要求:2.下载群晖videostation&am…...

事件分析应急响应-Server2229(环境+解析)
任务环境说明: 服务器场景:Server2229(开放链接)用户名:root,密码:...

SpringCloud:微服务
文章目录 微服务服务架构演变单例架构(集中式架构)分布式架构 微服务SpringCloud 微服务 服务架构演变 单例架构(集中式架构) 单例架构: 将业务的所有功能集中在一个项目中开发,打成一个包部署 优点&…...

网络编程(Modbus进阶)
思维导图 Modbus RTU(先学一点理论) 概念 Modbus RTU 是工业自动化领域 最广泛应用的串行通信协议,由 Modicon 公司(现施耐德电气)于 1979 年推出。它以 高效率、强健性、易实现的特点成为工业控制系统的通信标准。 包…...
谷歌浏览器插件
项目中有时候会用到插件 sync-cookie-extension1.0.0:开发环境同步测试 cookie 至 localhost,便于本地请求服务携带 cookie 参考地址:https://juejin.cn/post/7139354571712757767 里面有源码下载下来,加在到扩展即可使用FeHelp…...
线程同步:确保多线程程序的安全与高效!
全文目录: 开篇语前序前言第一部分:线程同步的概念与问题1.1 线程同步的概念1.2 线程同步的问题1.3 线程同步的解决方案 第二部分:synchronized关键字的使用2.1 使用 synchronized修饰方法2.2 使用 synchronized修饰代码块 第三部分ÿ…...

基于SpringBoot在线拍卖系统的设计和实现
摘 要 随着社会的发展,社会的各行各业都在利用信息化时代的优势。计算机的优势和普及使得各种信息系统的开发成为必需。 在线拍卖系统,主要的模块包括管理员;首页、个人中心、用户管理、商品类型管理、拍卖商品管理、历史竞拍管理、竞拍订单…...
scikit-learn机器学习
# 同时添加如下代码, 这样每次环境(kernel)启动的时候只要运行下方代码即可: # Also add the following code, # so that every time the environment (kernel) starts, # just run the following code: import sys sys.path.append(/home/aistudio/external-libraries)机…...
在golang中如何将已安装的依赖降级处理,比如:将 go-ansible/v2@v2.2.0 更换为 go-ansible/@v1.1.7
在 Go 项目中降级 go-ansible 从 v2.2.0 到 v1.1.7 具体步骤: 第一步: 修改 go.mod 文件 // 原 v2 版本声明 require github.com/apenella/go-ansible/v2 v2.2.0 替换为: // 改为 v…...

Vue3 PC端 UI组件库我更推荐Naive UI
一、Vue3生态现状与UI库选择的重要性 随着Vue3的稳定发布和Composition API的广泛采用,前端开发者面临着UI组件库的重新选择。一个好的UI库不仅能提升开发效率,还能确保项目的长期可维护性。本文将对比三大主流Vue3 UI库(Naive UI、Element …...
嵌入式面试常问问题
以下内容面向嵌入式/系统方向的初学者与面试备考者,全面梳理了以下几大板块,并在每个板块末尾列出常见的面试问答思路,帮助你既能夯实基础,又能应对面试挑战。 一、TCP/IP 协议 1.1 TCP/IP 五层模型概述 链路层(Link Layer) 包括网卡驱动、以太网、Wi‑Fi、PPP 等。负责…...
Docker、Wsl 打包迁移环境
电脑需要开启wsl2 可以使用wsl -v 查看当前的版本 wsl -v WSL 版本: 2.2.4.0 内核版本: 5.15.153.1-2 WSLg 版本: 1.0.61 MSRDC 版本: 1.2.5326 Direct3D 版本: 1.611.1-81528511 DXCore 版本: 10.0.2609…...
如何在Spring Boot中使用注解动态切换实现
还在用冗长的if-else或switch语句管理多个服务实现? 相信不少Spring Boot开发者都遇到过这样的场景:需要根据不同条件动态选择不同的服务实现。 如果告诉你可以完全摆脱条件判断,让Spring自动选择合适的实现——只需要一个注解,你是否感兴趣? 本文将详细介绍这种优雅的…...