当前位置: 首页 > news >正文

【编程基础知识】网络I/O模型详解:从阻塞到异步

引言

网络I/O模型是网络编程的核心,它们决定了应用程序如何进行读写操作以与网络进行数据交换。了解不同的网络I/O模型对于设计高效、可扩展的网络应用程序至关重要。

一、阻塞I/O(Blocking I/O)

1. 定义

  • 阻塞调用:当应用程序执行I/O操作时,如果数据没有准备好,调用会阻塞,直到数据到达或操作完成。

2. 适用场景

  • 简单客户端/服务端:适用于简单的程序,但扩展性较差。

3. 缺点

  • 线程限制:每个连接都需要一个独立的线程或进程。

流程图:阻塞I/O

应用程序
执行I/O操作
数据准备好?
继续执行
阻塞等待
二、非阻塞I/O(Non-blocking I/O)

1. 定义

  • 非阻塞调用:允许应用程序在数据未准备好时不必等待,可以继续执行其他任务。

2. 实现方式

  • 轮询检查:应用程序需要定期检查I/O操作是否完成。

3. 适用场景

  • 高并发:适用于高并发场景,但编程复杂度较高。

流程图:非阻塞I/O

应用程序
执行I/O操作
数据准备好?
继续执行
轮询检查
三、I/O复用(I/O Multiplexing)

1. 定义

  • 多路监控:使用select、poll或epoll等系统调用来监控多个I/O流。

2. 工作机制

  • 事件通知:当其中一个I/O流有数据可读或可写时,系统调用返回。

3. 适用场景

  • 多连接管理:适用于在单个线程内管理多个连接。

流程图:I/O复用

应用程序
使用select/poll/epoll监控I/O流
I/O流就绪?
处理I/O操作
等待
四、事件驱动I/O(Event-driven I/O)

1. 定义

  • 异步I/O:应用程序将I/O请求交给操作系统,然后立即返回。

2. 事件通知

  • 操作系统通知:当I/O操作完成时,操作系统会通知应用程序进行处理。

3. 适用场景

  • 高性能服务器:适用于构建高性能的网络服务器。

流程图:事件驱动I/O

应用程序
提交I/O请求
操作系统处理
I/O完成?
操作系统通知应用程序
等待
处理I/O事件
五、信号驱动I/O(Signal-driven I/O)

1. 定义

  • 信号通知:使用信号机制来通知应用程序I/O操作的完成。

2. 实现方式

  • 信号处理:应用程序通过设置信号处理函数来响应I/O操作的完成。

流程图:信号驱动I/O

应用程序
执行I/O操作
等待信号通知
信号到达?
处理I/O事件
六、多路复用I/O(Multiplexed I/O)

1. 定义

  • 高效多路复用:使用epoll这样的高效多路复用技术。

2. 优势

  • 性能和可扩展性:特别是在处理大量并发连接时。

流程图:多路复用I/O

应用程序
使用epoll监控I/O流
I/O流就绪?
处理I/O操作
等待
七、异步I/O(Asynchronous I/O, aio)

1. 定义

  • 异步操作:应用程序在发起I/O请求后立即返回,操作系统会在I/O操作完成后通知应用程序。

2. 优势

  • 高并发性:允许应用程序在等待I/O操作完成时继续执行其他任务。

流程图:异步I/O

应用程序
发起I/O请求
操作系统处理
I/O完成?
操作系统通知应用程序
等待
处理I/O事件
八、内存映射文件I/O(Memory-mapped I/O)

1. 定义

  • 内存映射:将文件或设备映射到内存地址空间,应用程序可以像访问普通内存一样对文件进行操作。

2. 优势

  • 性能提升:提高文件I/O的性能。

流程图:内存映射文件I/O

应用程序
映射文件到内存
像访问内存一样操作文件
文件操作完成
九、线程池(Thread Pool)

1. 定义

  • 预先创建线程:通过预先创建一定数量的线程来处理I/O任务。

2. 优势

  • 减少开销:避免了频繁创建和销毁线程的开销。

流程图:线程池

应用程序
线程池处理I/O任务
任务分配给线程
线程执行任务
任务完成
十、事件循环(Event Loop)

1. 定义

  • 事件处理核心:在事件驱动和异步I/O模型中,事件循环是处理I/O事件的核心机制。

2. 工作机制

  • 循环等待和处理:应用程序在一个循环中等待和处理各种事件。

流程图:事件循环

应用程序
事件循环
事件到达?
处理事件
等待
总结

每种I/O模型都有其适用场景和优缺点。选择合适的I/O模型可以显著提高网络应用程序的性能和可扩展性。随着现代操作系统和编程语言的发展,开发者可以选择更多高效的方式来处理网络I/O。

汇总表格
I/O模型描述适用场景优点缺点
阻塞I/O调用阻塞,直到数据到达简单客户端/服务端简单易用扩展性差
非阻塞I/O应用程序不必等待高并发场景编程复杂度较高需要轮询检查
I/O复用使用select、poll、epoll监控I/O流多连接管理比阻塞I/O高效需要在数据到达时处理I/O操作
事件驱动I/O异步I/O,操作系统通知高性能服务器适用于高性能服务器编程模型复杂
信号驱动I/O使用信号机制通知高并发网络服务响应速度快实现复杂
多路复用I/O使用epoll等技术大量并发连接性能和可扩展性好技术复杂
异步I/O操作系统完成后通知高并发网络服务最高并发性编程模型复杂
内存映射文件I/O映射文件到内存地址空间文件访问性能提升通常用于文件而非网络I/O
线程池预先创建线程处理I/O任务高效I/O操作减少线程创建和销毁开销需要管理线程
事件循环处理I/O事件的核心机制事件驱动和异步I/

相关文章:

【编程基础知识】网络I/O模型详解:从阻塞到异步

引言 网络I/O模型是网络编程的核心,它们决定了应用程序如何进行读写操作以与网络进行数据交换。了解不同的网络I/O模型对于设计高效、可扩展的网络应用程序至关重要。 一、阻塞I/O(Blocking I/O) 1. 定义 阻塞调用:当应用程序…...

yolo自动化项目实例解析(六)自建UI(主窗口、预览窗口)

前面我们大致把各个代码块梳理出来了,但是还是不知道从那块开始,我们这里主要先通过ui页面的元素去推理整个执行过程,我们首先需要知道ui功能里面有那些组件 qt设计师基础控件 Qt Designer 是一个图形界面设计工具,用于创建 Qt 应…...

Unity优质教程分类汇总 【持续更新中】

以下收录的均为作者自己看过的觉得比较好的教程 基础 Unity入门: https://www.bilibili.com/video/BV1HX4y1V71E?p13 生命周期 https://docs.unity.cn/cn/2022.3/uploads/Main/monobehaviour_flowchart.svg https://zhuanlan.zhihu.com/p/551294000 编程技巧…...

真正掌握left join on 和 where 的差别

总结 用 where 是先连接然后再筛选用 on 是先筛选再连接数据库在通过连接两张或多张表来返回记录时,都会生成一张中间的临时表,然后再将这张临时表返回给用户。在使用left jion时,on和where条件的区别如下: on条件是在生成临时表…...

神经网络在多分类问题中的应用

作者简介:热爱数据分析,学习Python、Stata、SPSS等统计语言的小高同学~个人主页:小高要坚强的博客当前专栏:Python之机器学习本文内容:神经网络在多分类问题中的应用作者“三要”格言:要坚强、要努力、要学习 目录 1. 引言 2.数据构造 3.划分数据集 4.神经网络实现多…...

nginx的安装和使用

源码安装 1.环境准备:卸载其他方式安装的web应用,防止端口冲突 2.下载nginx源码包 wget https://nginx.org/download/nginx-1.20.2.tar.gz 3.源码编译安装 yum install -y gcc pcre-devel zlib-devel #安装依赖包 useradd -M -s /sbin/nologin ngi…...

js采用覆盖键、覆盖鼠标滑动事件实现禁止网页通过 ctrl + +/- 和 ctrl + 滚轮 对页面进行缩放

一、兼容电脑端的禁止通过 ctrl /- 和 ctrl 滚轮 对页面进行缩放 const keyCodeMap {// 91: true, // command61: true,107: true, // 数字键盘 109: true, // 数字键盘 -173: true, // 火狐 - 号187: true, // 189: true, // -};二、覆盖ctrl||command ‘’/‘-’ // 覆…...

某客户Oracle RAC无法启动故障快速解决

某日,9:50左右接到好友协助需求,某个客户Oracle RAC无法启动,并发过来一个报错截图,如下: 和客户维护人员对接后,远程登录服务端进行故障分析。 查看hosts信息,首先进行心跳测试,测…...

【计算机网络 - 基础问题】每日 3 题(二十八)

✍个人博客:Pandaconda-CSDN博客 📣专栏地址:http://t.csdnimg.cn/fYaBd 📚专栏简介:在这个专栏中,我将会分享 C 面试中常见的面试题给大家~ ❤️如果有收获的话,欢迎点赞👍收藏&…...

探索甘肃非遗:Spring Boot网站开发案例

1 绪论 1.1 研究背景 当前社会各行业领域竞争压力非常大,随着当前时代的信息化,科学化发展,让社会各行业领域都争相使用新的信息技术,对行业内的各种相关数据进行科学化,规范化管理。这样的大环境让那些止步不前&#…...

产品管理- 互联网产品(6):产品测试

可用性测试 招募有代表性用户作为测试代表参与者,评估某产品符合特定可用性及符合程度。以具有代表性的用户为测试样本。 测试中多关注用户表情与动作。多鼓励与测试的用户更多的操作以用户角度发现问题。同时要做好询问工作,耐心聆听用户的意见&#x…...

奖金高达 110 万元,Spatial Joy 2024 全球 AR 应用开发大赛启动

今年是AR应用开发大赛第三届,恰逢Rokid成立十周年,我们推出全新的大赛品牌“Spatial Joy”,引领开发者享受开发乐趣,为其打造充满挑战和惊喜的开发之旅,逐渐成为空间计算时代全球最大AR应用开发大赛。回顾大赛发展&…...

git add成功后忘记commit的文件丢了?

本文目标:开发人员,在了解git fsck命令用法的条件下,进行git add成功但由于误操作导致丢失的文件找回,达到找回丢失文件的程度。 文章目录 1 痛点2 解决方案3 总结/练习 1 痛点 开发过程中,分支太多(基线分…...

Python Web 开发中的DevOps 实践与自动化运维

Python Web 开发中的DevOps 实践与自动化运维 📚 目录 🔧 基础设施即代码(IaC) 使用 Terraform、AWS CloudFormation 实现基础设施即代码使用 Python 进行云服务资源的管理与自动化配置编写和部署基础设施的自动化脚本 &#x1f…...

探索私有化聊天软件:即时通讯与音视频技术的结合

在数字化转型的浪潮中,企业对于高效、安全、定制化的通讯解决方案的需求日益迫切。鲸信,作为音视频通信技术的佼佼者,凭借其强大的即时通讯与音视频SDK(软件开发工具包)结合能力,为企业量身打造了私有化聊天…...

性能调优知识点(mysql)三

SQL底层执行原理 MySQL的内部组件结构:大体来说,MySQL 可以分为 Server 层和存储引擎层store两部分 Server层:主要包括连接器、查询缓存、分析器、优化器、执行器等,涵盖 MySQL 的大多数核心服务功能,以及所有的内置函数&#xf…...

TinyWebSever项目面试题整理

TinyWebSever项目面试题整理 1.为什么要做这样一个项目? 满足高并发和高性能需求:现代Web应用面对大量用户,Web服务器需要高效处理并发连接。比如通过线程池、非阻塞I/O、事件驱动机制(如epoll),Web服务器…...

维修保养记录接口-维修保养记录API-汽车接口

维修保养记录接口的使用主要涉及到API对接和在线查询两种方式。以下是详细的使用步骤和注意事项: 一、API对接 注册与申请: 首先,你需要在提供维修保养记录接口的平台(如挖数据平台、第三方数据服务商等)进行注册&…...

基于 RealSense D435相机实现手部姿态检测

基于 RealSense D435i相机进行手部姿态检测,其中采用 Mediapipe 进行手部检测,以下是详细步骤: Mediapipe 是一个由 Google开发的开源框架,专门用于构建多媒体处理管道,特别是计算机视觉和机器学习任务。它提供了一系列…...

linux 下mailx 的使用。发送短信

1. 安装 mailx yum install -y mailx 2.请求数字证书 163 邮箱 mkdir -p /root/.certs/ ####创建目录,用来存放证书 echo -n | openssl s_client -connect smtp.163.com:465 | sed -ne /-BEGIN CERTIFICATE-/,/-END CERTIFICATE-/p >…...

[特殊字符] 智能合约中的数据是如何在区块链中保持一致的?

🧠 智能合约中的数据是如何在区块链中保持一致的? 为什么所有区块链节点都能得出相同结果?合约调用这么复杂,状态真能保持一致吗?本篇带你从底层视角理解“状态一致性”的真相。 一、智能合约的数据存储在哪里&#xf…...

大话软工笔记—需求分析概述

需求分析,就是要对需求调研收集到的资料信息逐个地进行拆分、研究,从大量的不确定“需求”中确定出哪些需求最终要转换为确定的“功能需求”。 需求分析的作用非常重要,后续设计的依据主要来自于需求分析的成果,包括: 项目的目的…...

golang循环变量捕获问题​​

在 Go 语言中,当在循环中启动协程(goroutine)时,如果在协程闭包中直接引用循环变量,可能会遇到一个常见的陷阱 - ​​循环变量捕获问题​​。让我详细解释一下: 问题背景 看这个代码片段: fo…...

深入理解JavaScript设计模式之单例模式

目录 什么是单例模式为什么需要单例模式常见应用场景包括 单例模式实现透明单例模式实现不透明单例模式用代理实现单例模式javaScript中的单例模式使用命名空间使用闭包封装私有变量 惰性单例通用的惰性单例 结语 什么是单例模式 单例模式(Singleton Pattern&#…...

在 Nginx Stream 层“改写”MQTT ngx_stream_mqtt_filter_module

1、为什么要修改 CONNECT 报文? 多租户隔离:自动为接入设备追加租户前缀,后端按 ClientID 拆分队列。零代码鉴权:将入站用户名替换为 OAuth Access-Token,后端 Broker 统一校验。灰度发布:根据 IP/地理位写…...

第一篇:Agent2Agent (A2A) 协议——协作式人工智能的黎明

AI 领域的快速发展正在催生一个新时代,智能代理(agents)不再是孤立的个体,而是能够像一个数字团队一样协作。然而,当前 AI 生态系统的碎片化阻碍了这一愿景的实现,导致了“AI 巴别塔问题”——不同代理之间…...

现代密码学 | 椭圆曲线密码学—附py代码

Elliptic Curve Cryptography 椭圆曲线密码学(ECC)是一种基于有限域上椭圆曲线数学特性的公钥加密技术。其核心原理涉及椭圆曲线的代数性质、离散对数问题以及有限域上的运算。 椭圆曲线密码学是多种数字签名算法的基础,例如椭圆曲线数字签…...

成都鼎讯硬核科技!雷达目标与干扰模拟器,以卓越性能制胜电磁频谱战

在现代战争中,电磁频谱已成为继陆、海、空、天之后的 “第五维战场”,雷达作为电磁频谱领域的关键装备,其干扰与抗干扰能力的较量,直接影响着战争的胜负走向。由成都鼎讯科技匠心打造的雷达目标与干扰模拟器,凭借数字射…...

UR 协作机器人「三剑客」:精密轻量担当(UR7e)、全能协作主力(UR12e)、重型任务专家(UR15)

UR协作机器人正以其卓越性能在现代制造业自动化中扮演重要角色。UR7e、UR12e和UR15通过创新技术和精准设计满足了不同行业的多样化需求。其中,UR15以其速度、精度及人工智能准备能力成为自动化领域的重要突破。UR7e和UR12e则在负载规格和市场定位上不断优化&#xf…...

Mobile ALOHA全身模仿学习

一、题目 Mobile ALOHA:通过低成本全身远程操作学习双手移动操作 传统模仿学习(Imitation Learning)缺点:聚焦与桌面操作,缺乏通用任务所需的移动性和灵活性 本论文优点:(1)在ALOHA…...