说一说Node.js高性能开发中的I/O操作
众所周知,在软件开发的领域中,输入输出(I/O)操作是程序与外部世界交互的重要环节,比如从文件读取数据、向网络发送请求等。这段时间,也指导项目中一些项目的开发工作,发现在Node.js运用中,理解阻塞与非阻塞 I/O 的差异,是掌握 Node.js 这一强大开发工具的关键所在。之所以这么说,是我发现目前项目组大多开发人员(刚毕业不久)对此知识点没有完整的认知,所以在大多数现代 Web 应用中,非阻塞 I/O 凭借其出色的性能和可扩展性,还有更大的提升空间。所以今天结合者Node.js这一个话题将这个概念融合在一起说说。
一、I/O 操作的基本概念
先了解一下,基本概念。I/O 操作指的是计算机系统与外部设备(如硬盘、网络接口、键盘、显示器等)之间的数据传输过程。在程序运行过程中,I/O 操作往往是相对缓慢的,与 CPU 的高速运算形成鲜明对比。例如,从硬盘读取一个大文件可能需要几十毫秒,而 CPU 在这段时间内可以执行数百万条指令。因此,如何高效地处理 I/O 操作,对于程序的性能至关重要。
二、阻塞 I/O:传统的同步处理方式
阻塞 I/O 是一种传统的同步处理方式。当程序执行阻塞 I/O 操作时,会一直等待该操作完成,在这期间程序会被 "阻塞",无法执行其他任何任务。就好比你去银行办理业务,取号后必须在大厅等待叫号,在等待的过程中,你不能做其他任何事情,只能眼巴巴地等着。
以读取文件为例,在使用阻塞 I/O 的编程语言中(如传统的同步 Java I/O),当程序调用读取文件的函数时,会立即进入等待状态,直到文件数据被完全读取到内存中,程序才会继续执行后续的代码。在等待的过程中,CPU 资源被浪费,因为程序无法利用这段时间去处理其他任务。
阻塞 I/O 的优点是编程模型简单,易于理解和调试。开发人员可以按照顺序编写代码,不需要考虑异步回调等复杂的逻辑。然而,它的缺点也非常明显,尤其是在处理多个 I/O 操作时,性能会急剧下降。例如,当一个服务器需要同时处理多个客户端的请求时,如果每个请求都采用阻塞 I/O 方式,服务器必须为每个请求创建一个独立的线程或进程来处理,这会导致系统资源的大量消耗,并且线程或进程之间的上下文切换也会带来额外的开销。
三、非阻塞 I/O:异步处理的革新
非阻塞 I/O 是一种异步处理方式,它允许程序在发起 I/O 操作后,不需要立即等待操作完成,而是继续执行后续的代码。当 I/O 操作完成后,系统会以某种方式通知程序(如回调函数、事件驱动等),程序再处理 I/O 操作的结果。这就好比你在网上购物时下单后,不需要一直盯着订单状态,而是可以去做其他事情,等快递到达时,快递员会打电话通知你。
在非阻塞 I/O 模型中,程序通过轮询或者事件驱动的方式来管理多个 I/O 操作。轮询是指程序定期检查 I/O 操作是否完成,这种方式虽然简单,但会浪费 CPU 资源,因为在轮询的过程中,CPU 需要不断地执行检查操作。事件驱动则是一种更高效的方式,它通过操作系统提供的事件机制,当 I/O 操作完成时,自动触发相应的事件,程序只需注册事件处理函数即可。
Node.js 就是基于事件驱动和非阻塞 I/O 构建的运行环境。它采用单线程的事件循环机制,能够高效地处理大量的并发 I/O 操作。在 Node.js 中,当程序发起一个 I/O 操作(如读取文件、处理网络请求等)时,会将该操作交给底层的操作系统去处理,然后立即返回,继续执行后续的代码。当操作系统完成 I/O 操作后,会将结果放入事件队列中,Node.js 的事件循环会不断地从事件队列中取出事件,并执行相应的回调函数来处理结果。
四、阻塞与非阻塞 I/O 的核心差异
1、程序执行方式:阻塞 I/O 会阻塞程序的执行,直到 I/O 操作完成;非阻塞 I/O 不会阻塞程序的执行,程序可以在发起 I/O 操作后继续执行其他任务。
2、资源利用:阻塞 I/O 需要为每个 I/O 操作创建独立的线程或进程,导致系统资源的大量消耗;非阻塞 I/O 通过单线程和事件驱动的方式,高效地利用系统资源,能够处理大量的并发请求。
3、并发性:阻塞 I/O 的并发性较差,难以处理高并发的场景;非阻塞 I/O 具有良好的并发性,能够轻松应对大量的并发 I/O 操作。
4、编程模型:阻塞 I/O 的编程模型简单,易于理解;非阻塞 I/O 的编程模型相对复杂,需要处理异步回调、Promise、async/await 等异步编程模式。
五、Node.js 中非阻塞 I/O 的实现原理
前面铺垫了概念知识,现在就讲其重点?Node.js 的非阻塞 I/O 实现主要依赖于底层的 libuv 库。libuv 是一个跨平台的异步 I/O 库,它提供了事件循环、文件 I/O、网络 I/O、子进程等功能。在 Windows 系统上,libuv 使用 IOCP(输入输出完成端口)来实现异步 I/O;在 Linux 系统上,使用 epoll;在 macOS 系统上,使用 kqueue。这些底层的异步 I/O 机制能够高效地管理大量的并发 I/O 操作。可以说是各取所长,完成相应的I/O操作。
Node.js 的事件循环是其核心机制,它负责处理事件队列中的事件,并执行相应的回调函数。事件循环分为多个阶段,包括定时器阶段(timers)、I/O 回调阶段(I/O callbacks)、空闲 / 准备阶段(idle/prepare)、轮询阶段(poll)、检查阶段(check)和关闭回调阶段(close callbacks)。每个阶段都有其特定的功能,例如定时器阶段处理 setTimeout 和 setInterval 设置的回调函数,轮询阶段处理新的 I/O 事件等。
六、非阻塞 I/O 在现代 Web 应用中的优势
1、高性能:非阻塞 I/O 能够高效地处理大量的并发请求,减少系统资源的消耗,提高服务器的吞吐量。例如,一个使用 Node.js 构建的 Web 服务器,可以轻松处理数万个并发连接,而传统的阻塞 I/O 服务器在处理大量并发连接时,性能会急剧下降。
2、可扩展性:非阻塞 I/O 的编程模型使得应用程序更容易扩展。开发人员可以通过添加更多的事件处理函数来处理更多的并发请求,而不需要担心线程或进程数量过多带来的问题。
3、内存占用低:由于 Node.js 采用单线程的事件循环机制,不需要为每个请求创建独立的线程或进程,因此内存占用较低,能够在有限的硬件资源下运行更多的应用程序。
4、适合 I/O 密集型应用:现代 Web 应用通常是 I/O 密集型的,例如需要处理大量的网络请求、文件读取等操作。非阻塞 I/O 在处理这些操作时具有明显的优势,能够充分利用系统资源,提高应用程序的性能。
七、阻塞 I/O 的适用场景
虽然非阻塞 I/O 在大多数情况下表现更好,但阻塞 I/O 在某些特定场景下仍然有其用武之地。例如,当处理少量的 I/O 操作,并且这些操作的执行时间非常短,此时阻塞 I/O 的开销可能可以忽略不计,而其简单的编程模型可能更适合开发。此外,在一些需要严格顺序执行的场景中,阻塞 I/O 也可能是一个不错的选择。
最后小结以下
阻塞与非阻塞 I/O 是两种不同的 I/O 处理方式,它们各有优缺点。阻塞 I/O 编程简单,但性能和可扩展性较差,适合处理少量的、简单的 I/O 操作;非阻塞 I/O 编程相对复杂,但具有高性能和良好的可扩展性,适合处理大量的并发 I/O 操作。Node.js 作为基于非阻塞 I/O 和事件驱动的运行环境,充分发挥了非阻塞 I/O 的优势,成为了现代 Web 应用开发的重要选择。
无论是专业人士还是非专业人士,理解阻塞与非阻塞 I/O 的差异对于掌握 Node.js 和构建高性能的 Web 应用都具有重要意义。对于专业人士来说,深入理解其底层实现原理和编程模型,能够更好地利用 Node.js 的优势进行开发和优化;这也是 Node.js 在现代 Web 开发中如此受欢迎的原因之一吧。随着 Web 应用的不断发展,对高性能和可扩展性的要求越来越高,非阻塞 I/O 将在未来的开发中发挥更加重要的作用。
相关文章:

说一说Node.js高性能开发中的I/O操作
众所周知,在软件开发的领域中,输入输出(I/O)操作是程序与外部世界交互的重要环节,比如从文件读取数据、向网络发送请求等。这段时间,也指导项目中一些项目的开发工作,发现在Node.js运用中&#…...
扫描网络内所有设备的IP地址
arp 命令本身不能直接列出网络中所有 IP 地址,它只能显示本机 ARP 缓存中已知的 IP-MAC 映射,即:本机通信过的设备。 如果你想查询局域网中所有在线的 IP 地址,需要配合 ping 扫描或使用更强大的工具。以下是几种常见的方法&…...
web3 前端常见错误类型以及错误捕获处理
在Web3前端开发中,常见的错误类型包括用户拒绝交易、RPC节点超时、网络连接问题、智能合约调用错误等。正确捕获这些错误并提供友好的用户提示是提升用户体验的关键。以下是一些常见的Web3前端错误类型及其处理方法: 1. 用户拒绝交易 根据错误码 4001 …...

应用层协议简介:以 HTTP 和 MQTT 为例
文章目录 应用层协议简介:什么是应用层协议?为什么需要应用层协议?什么是应用层协议?为什么需要应用层协议? HTTP 协议详解HTTP 协议特点HTTP 工作的基本原理HTTP 请求与响应示例为什么 Web 应用基于 HTTP 请求&#x…...

LeetCode 39. 组合总和 LeetCode 40.组合总和II LeetCode 131.分割回文串
LeetCode 39. 组合总和 需要注意的是题目已经明确了数组内的元素不重复(重复的话需要执行去重操作),且元素都为正整数(如果存在0,则会出现死循环)。 思路1:暴力解法 对最后结果进行去重 每一…...

如何在 Windows 11 或 10 上安装 Fliqlo 时钟屏保
了解如何在 Windows 11 或 10 上安装 Fliqlo,为您的 PC 或笔记本电脑屏幕添加一个翻转时钟屏保以显示时间。 Fliqlo 是一款适用于 Windows 和 macOS 平台的免费时钟屏保。它也适用于移动设备,但仅限于 iPhone 和 iPad。Fliqlo 的主要功能是在用户不活动时在 PC 或笔记本电脑…...
Linux云计算训练营笔记day08(MySQL数据库)
Linux云计算训练营笔记day08(MySQL数据库) 目录 Linux云计算训练营笔记day08(MySQL数据库)数据准备修改更新update删除delete数据类型1.整数类型2.浮点数类型(小数)3.字符类型4.日期5.枚举: 表头的值必须在列举的值里选择拷贝表复…...
计算机视觉与深度学习 | matlab实现EMD-CNN-LSTM时间序列预测(完整源码、数据、公式)
EMD-CNN-LSTM 一、完整代码实现二、核心公式说明1. **经验模态分解(EMD)**2. **1D卷积运算**3. **LSTM门控机制**4. **损失函数**三、代码结构解析四、关键参数说明五、性能优化建议六、典型输出示例以下是用MATLAB实现EMD-CNN-LSTM时间序列预测的完整方案,包含数据生成、经…...
【vue】【环境配置】项目无法npm run serve,显示node版本过低
解决方案:安装高版本node,并且启用高版本node 步骤: 1、查看当前版本 node -v2、配置nvm下载镜像源 1)查看配置文件位置 npm root2)找到settings.txt文件 修改镜像源为: node_mirror: https://npmmirro…...

国芯思辰| 轮速传感器AH741对标TLE7471应用于汽车车轮速度感应
在汽车应用中,轮速传感器可用于车轮速度感应,为 ABS、ESC 等安全系统提供精确的轮速信息,帮助这些系统更好地发挥作用,在紧急制动或车辆出现不稳定状态时,及时调整车轮的制动力或动力分配。 国芯思辰两线制差分式轮速…...
鸿蒙PC操作系统:从Linux到自研微内核的蜕变
鸿蒙PC操作系统是否基于Linux内核,需要结合其技术架构、发展阶段和官方声明综合分析。以下从多个角度展开论述: 一、鸿蒙操作系统的多内核架构设计 多内核混合架构 根据资料,鸿蒙操作系统(HarmonyOS)采用分层多内核架构,内核层包含Linux内核、LiteOS-m内核、LiteOS-a内核…...

小程序弹出层/抽屉封装 (抖音小程序)
最近忙于开发抖音小程序,最想吐槽的就是,既没有适配的UI框架,百度上还找不到关于抖音小程序的案列,我真的很裂开啊,于是我通过大模型封装了一套代码 效果如下 介绍 可以看到 这个弹出层是支持关闭和标题显示的…...
深入理解动态规划:从斐波那契数列到最优子结构
引言 动态规划(Dynamic Programming, DP)是算法设计中一种非常重要的思想,广泛应用于解决各类优化问题。许多看似复杂的问题,通过动态规划的视角分析,往往能找到高效的解决方案。本文将系统介绍动态规划的核心概念,通过经典案例展…...
基于Linux环境实现Oracle goldengate远程抽取MySQL同步数据到MySQL
基于Linux环境实现Oracle goldengate远程抽取MySQL同步数据到MySQL 场景说明: 先有项目需要读取生产库数据,但是不能直接读取生产库数据,需要把生产数据同步到一个中间库,下游系统从中间库读取数据。 生产库mysql - OGG - 中间库…...

电子电路原理第十六章(负反馈)
1927年8月,年轻的工程师哈罗德布莱克(Harold Black)从纽约斯塔顿岛坐渡轮去上班。为了打发时间,他粗略写下了关于一个新想法的几个方程式。后来又经过反复修改, 布莱克提交了这个创意的专利申请。起初这个全新的创意被认为像“永动机”一样愚蠢可笑,专利申请也遭到拒绝。但…...
Go语言数组的定义与操作 - 《Go语言实战指南》
在 Go 语言中,数组(Array) 是一种定长、同类型的集合。它在内存中是连续分布的,适合用于性能敏感的场景。 一、数组的定义 数组的基本语法如下: var 数组名 [长度]元素类型 示例: var nums [5]int …...
物联网简介:万物互联的未来图景
物联网简介:万物互联的未来图景 引言 在科技飞速发展的今天,我们身边的一切似乎都在悄然发生变化。从清晨智能闹钟根据你的睡眠状态自动唤醒,到厨房里的咖啡机在你起床前已经煮好咖啡;从城市交通系统通过实时数据优化红绿灯时长…...

命令拼接符
Linux多命令顺序执行符号需要记住5个 【|】【||】【 ;】 【&】 【&&】 ,在命令执行里面,如果服务器疏忽大意没做限制,黑客通过高命令拼接符,可以输入很多非法的操作。 ailx10 网络安全优秀回答者 互联网…...

【通用智能体】Lynx :一款基于终端的纯文本网页浏览器
Lynx :一款基于终端的纯文本网页浏览器 一、Lynx简介二、应用场景及案例场景 1:服务器端网页内容快速查看场景 2:网页内容快速提取场景 3:表单提交与自动化交互场景 4:网络诊断与调试场景 5:辅助工具适配 三…...

51单片机的lcd12864驱动程序
#include <reg51.h> #include <intrins.h>#define uchar...

GStreamer (三)常⽤插件
常⽤插件 1、Source1.1、filesrc1.2. videotestsrc1.3. v4l2src1.4. rtspsrc和rtspclientsink 2、 Sink2.1. filesink2.2. fakesink2.3. xvimagesink2.4. kmssink2.5. waylandsink2.6. rkximagesink2.7. fpsdisplaysink 3 、视频推流/拉流3.1. 本地推流/拉流3.1.1 USB摄像头3.1…...
Java POJO接收前端null值设置
在 Java 中,若要让 price 字段接收前端传递的 null 值,只需确保以下几点: 1. 使用包装类型 Double 你的 price 字段已经是包装类型 Double(而不是基本类型 double),这天然支持 null 值。基本类型 double …...
详细总结和讲解redis的基本命令
Redis 是一个开源的内存数据结构存储系统,它可以用作数据库、缓存和消息中间件。Redis 支持多种类型的数据结构,如字符串(Strings)、哈希(Hashes)、列表(Lists)、集合(Se…...
Linux 内核等待机制详解:prepare_to_wait_exclusive 与 TASK_INTERRUPTIBLE
1. prepare_to_wait_exclusive 函数解析 1.1 核心作用 prepare_to_wait_exclusive 是 Linux 内核中用于将进程以独占方式加入等待队列的关键函数,其主要功能包括: 标记独占等待:通过设置 WQ_FLAG_EXCLUSIVE 标志,表明此等待条目是独占的。 安全入队:在自旋锁保护下,将条…...
蓝桥杯2300 质数拆分
问题描述 将 2022 拆分成不同的质数的和,请问最多拆分成几个? 01背包问题 #include<iostream> #include<cmath> #include<algorithm> using namespace std;int prime[2025]; int dp[2025]; //dp[j]:和为 j 时的最多拆分…...

软件架构风格系列(2):面向对象架构
文章目录 引言一、什么是面向对象架构风格1. 定义与核心概念2. 优点与局限性二、业务建模:用对象映射现实世界(一)核心实体抽象1. 员工体系2. 菜品体系 (二)封装:隐藏实现细节 三、继承实战:构建…...
ngx_http_random_index_module 模块概述
一、使用场景 随机内容分发 当同一目录下存放多份等价内容(如多张轮播图、不同版本静态页面等)时,可通过随机索引实现负载均衡或流量分散。A/B 测试 通过目录请求自动随机分配用户到不同测试组,无需后端逻辑参与。动态“首页”选…...

go-zero(十八)结合Elasticsearch实现高效数据检索
go-zero结合Elasticsearch实现高效数据检索 1. Elasticsearch简单介绍 Elasticsearch(简称 ES) 是一个基于 Lucene 库 构建的 分布式、开源、实时搜索与分析引擎,采用 Apache 2.0 协议。它支持水平扩展,能高效处理大规模数据的存…...

AM32电调学习解读九:ESC上电启动关闭全流程波形分析
这是第九篇,前面的文章把各个模块的实现都介绍了一轮,本章是从运行的角度结合波形图,把整个流程走一遍。 先看下一运行的配置,我把一些配置关闭了,这样跑起来会好分析一些,不同配置跑起来效果会有差异。使用…...
怎么打包发布到npm?——从零到一的详细指南
怎么打包发布到npm?——从零到一的详细指南 目录 怎么打包发布到npm?——从零到一的详细指南一、准备工作1. 注册 npm 账号2. 安装 Node.js 和 npm 二、初始化项目三、编写你的代码四、配置 package.json五、打包你的项目六、登录 npm七、发布到 npm八、…...