Redis中的线程模型
Redis 的单线程模型详解
Redis 的“单线程”模型主要指的是其 主线程,这个主线程负责从客户端接收请求、解析命令、处理数据和返回响应。为了深入了解 Redis 单线程的具体工作流程,我们可以将其分为以下几个步骤:
-
接收客户端请求
Redis 的主线程会通过网络接口接收来自客户端的请求。Redis 使用了 I/O 多路复用机制(如epoll
、select
),它可以同时监听多个客户端连接,这样 Redis 在单线程中就能高效地处理大量连接。 -
解析请求
一旦 Redis 主线程接收到请求数据,它会对请求内容进行解析,识别请求的类型、命令名称以及相关的参数。这个解析步骤是必要的,因为它要确保接收到的命令是正确和合法的,才能进一步执行。 -
执行命令
根据解析得到的命令类型,Redis 主线程会在内存中执行相应的操作,例如读取、修改、删除某个键值对。Redis 将数据存储在内存中,这种设计加快了数据的读写速度。同时,Redis 的单线程模型保证了所有操作都是按顺序执行的,因此避免了复杂的并发控制,操作的顺序性和一致性都得到了保证。 -
返回结果
当命令执行完毕后,主线程会将结果返回给客户端。返回操作和请求接收类似,也通过网络接口完成。因为 Redis 单线程操作流畅、没有锁机制的阻塞,通常可以迅速响应客户端的请求。
Redis 采用单线程模型来执行这些核心步骤,带来了几方面的好处:
- 避免锁机制:单线程模型下无需锁,避免了多线程常见的死锁问题,同时省去锁开销。
- 顺序执行:所有命令按顺序执行,避免了数据竞争,操作的稳定性强。
- I/O 多路复用:单线程模型配合 I/O 多路复用技术,能处理大量并发连接而不受多线程切换的开销影响。
Redis 的后台多线程任务
尽管 Redis 的主线程是单线程的,但 Redis 还是会使用一些后台线程来完成辅助任务,主要包括以下几个方面:
-
关闭文件
在需要关闭文件或断开连接时,Redis 使用后台线程执行这些操作,防止主线程因执行这些耗时操作而被阻塞。 -
AOF 持久化
Redis 支持 AOF 方式的持久化,将写入操作记录到 AOF 文件中,并定期进行刷盘操作。刷盘操作会在后台线程中完成,这样可以避免因写入磁盘而影响主线程的处理速度。 -
内存释放
对于大型键(如包含大量元素的集合)的删除,Redis 将释放内存的任务交给后台线程完成,防止主线程因释放大内存块而阻塞。
Redis 的单线程与多线程组合带来的优势
通过让主线程处理关键的请求流程,而将一些耗时任务交给后台线程,Redis 达到了性能和稳定性的平衡:
- 高效响应:单线程主流程确保请求按序执行,不会因锁而影响速度;
- 低延迟:异步关闭文件、刷盘和释放内存,避免这些耗时操作阻塞主流程;
- 稳定性强:通过多线程完成后台任务,保证持久化数据和内存管理,减小主线程压力。
总结
Redis 的主线程实现了单线程执行模型,保持简单高效;同时借助多线程完成关闭文件、AOF 刷盘和释放内存等后台任务,保证了 Redis 的可靠性与稳定性。这种结构设计既兼顾了单线程的速度优势,也满足了持久化和内存管理的需求,堪称一种精妙的工程设计。
Redis 为什么在单线程模型下依然快速?
Redis 采用单线程模型来处理客户端的请求,这可能让很多人认为它会面临性能瓶颈。实际上,Redis 在单线程下的性能非常高,原因在于多个方面的巧妙设计和优化。下面是详细的分析:
1. 内存存储,极快的读写速度
Redis 的数据完全存储在内存中,相比于传统的基于磁盘存储的数据库,Redis 省去了磁盘 I/O 的瓶颈。内存的读写速度比磁盘快得多,因此即使是单线程,Redis 依然可以快速处理大量的读写请求。
- 内存存储的优势:Redis 内部的数据结构被优化为可以快速在内存中操作,几乎所有的操作都能在微秒级别完成。
- 内存与 CPU 的高效交互:内存数据的访问非常高效,CPU 与内存的交互速度比磁盘存储要快很多。
2. 避免线程切换的开销
在多线程程序中,操作系统会定期进行线程切换,以便让不同线程运行。这种切换过程会引入上下文切换的开销,影响整体性能。而 Redis 使用单线程模型,这就完全避免了线程切换的成本。
- 无上下文切换:单线程的 Redis 不需要频繁保存和加载线程状态,减少了上下文切换的开销。
- 简化了并发问题:无需锁机制,避免了锁竞争带来的性能损失。
3. 避免锁机制的开销
在多线程环境中,为了确保线程安全,常常需要使用锁。锁的使用会造成性能下降,特别是当并发请求很多时,锁的竞争会使得线程不得不等待,这会导致响应变慢。而 Redis 通过单线程模型完全避免了这种锁的竞争。
- 顺序执行:Redis 的所有操作都是按顺序执行的,因为只有一个线程在工作,不需要同步控制。
- 没有死锁和锁竞争:在高并发情况下,Redis 不会有死锁,也不会因为加锁导致线程等待,性能不会受到影响。
4. 高效的 I/O 多路复用
Redis 使用了I/O 多路复用技术(如 epoll
、select
等),使得单线程能够同时处理多个客户端的连接和请求。这意味着,即使有成千上万的客户端同时连接,Redis 的单线程依然能高效处理这些请求。
- I/O 多路复用:这种机制允许 Redis 在主线程中高效管理多个并发请求,而无需为每个请求分配独立的线程。
- 非阻塞操作:即使 Redis 正在等待某些请求的响应,它仍然可以处理其他请求,避免了阻塞。
5. 单线程的顺序执行
Redis 采用单线程意味着所有命令都按顺序执行。每个客户端的请求都会被按顺序处理,确保了操作的一致性和稳定性,同时避免了并发带来的复杂性和性能问题。
- 没有数据竞争:由于 Redis 是单线程的,所以不存在多个线程同时访问同一数据而导致的竞争情况。
- 操作的一致性:每次命令执行后,Redis 都能保证数据的状态是稳定且一致的,避免了并发时可能出现的数据不一致问题。
6. 高效利用 CPU 缓存
单线程的 Redis 在处理请求时,操作是顺序的,数据处理流畅,可以高效地利用 CPU 缓存。当数据在内存中连续存取时,CPU 可以更好地预取数据,并减少缓存未命中的情况。
- 内存连续性和 CPU 缓存:由于 Redis 使用内存存储数据且操作顺序,CPU 可以更高效地使用其缓存系统,提高命令执行速度。
- 减少缓存失效:由于单线程的顺序执行,Redis 可以更好地利用 CPU 的数据缓存,减少内存读取时的缓存失效。
7. 非阻塞的后台任务
尽管 Redis 的主线程是单线程的,但它通过异步方式执行一些较为耗时的任务,例如AOF 刷盘、RDB 快照、内存回收等,这些操作不会阻塞主线程的执行。
- 异步持久化操作:例如,在 AOF 持久化模式下,Redis 会将写入操作记录到 AOF 文件,但通过后台线程异步刷盘,确保主线程的响应性能不会受到影响。
- 内存回收:当 Redis 删除大对象时,主线程不会执行耗时的内存回收任务,而是将此类任务交给后台线程处理,避免了长时间阻塞主线程。
为什么 Redis 6.0 之前使用单线程?
Redis 在 6.0 之前坚持使用单线程的主要原因是:
-
CPU 不是性能瓶颈
在 Redis 6.0 之前,Redis 的性能瓶颈通常并不来自 CPU。Redis 使用单线程的设计,不会面临多线程中的上下文切换、加锁、死锁等问题。因为 Redis 的核心工作是内存操作,内存访问非常快,单线程模型能够有效地避免线程切换和锁竞争带来的额外开销。 -
避免复杂性
使用单线程可以大大简化代码逻辑和系统实现。多线程会增加程序的复杂性,带来如线程同步、死锁等问题,而单线程避免了这些问题,使得代码更加简洁且易于维护。 -
高效的 I/O 多路复用
Redis 使用了 I/O 多路复用技术(如select
、epoll
等),通过单线程高效地处理多个客户端的请求。网络 I/O 的性能瓶颈通常在于网络带宽,而不是 CPU 计算能力,因此 Redis 使用单线程处理请求并没有遇到性能瓶颈。 -
减少资源消耗
单线程模型避免了线程创建、销毁和管理的开销,降低了系统资源的消耗。Redis 所有的请求都在一个线程中顺序处理,不需要为每个请求创建新线程,从而减少了系统开销。
Redis 6.0 之后为什么引入多线程?
虽然 Redis 一直使用单线程,但随着技术的发展,Redis 在 6.0 之后引入了多线程来优化某些性能瓶颈,主要体现在以下几个方面:
-
网络 I/O 性能瓶颈
随着网络硬件性能的提升,Redis 的性能瓶颈逐渐从 CPU 转向了网络 I/O。在高并发和高速网络环境下,单线程的 I/O 多路复用可能变得不够高效。Redis 6.0 引入了多个 I/O 线程来处理网络请求,这样可以充分利用多核 CPU 的资源,提升 I/O 处理能力,减少网络延迟。 -
持久化任务的分离
Redis 的持久化操作(如 AOF 刷盘和 RDB 快照)在之前会阻塞主线程,导致客户端请求的延迟。通过引入多线程,这些磁盘 I/O 密集型的任务可以并行处理,从而避免了对主线程的阻塞,使得客户端请求的处理更加高效。 -
CPU 资源的更好利用
随着多核 CPU 的普及,Redis 6.0 开始引入多线程的方式来提升 CPU 的利用率。多线程并行处理 I/O 和持久化任务,可以更好地分配 CPU 资源,避免单线程无法充分发挥多核优势的问题。 -
系统复杂度与性能折中
引入多线程确实会带来系统复杂度的增加,包括线程切换、线程同步等问题。Redis 的开发团队决定在 6.0 之后,引入多线程处理一些特定的任务(主要是 I/O 操作),以换取更高的性能。尽管多线程带来了额外的复杂性,但对于特定场景(如高并发请求和大规模数据的持久化),它带来的性能提升是值得的。
单线程与多线程的抉择
-
Redis 6.0 之前的单线程设计:
Redis 使用单线程的设计,充分利用了内存操作的高效性,避免了多线程带来的复杂性。单线程适用于 CPU 不是瓶颈的情况下,通过 I/O 多路复用处理网络请求,保证了高性能。 -
Redis 6.0 之后的多线程设计:
随着网络硬件和系统架构的进步,Redis 6.0 引入了多线程来处理网络 I/O 和持久化任务。这样做是因为随着硬件性能提升,Redis 的瓶颈开始转向网络 I/O,单线程的 I/O 多路复用无法满足高并发场景下的需求。通过引入多线程,Redis 提升了并发请求处理的能力,同时也保持了原有的单线程模型对请求处理的简单性。
总之,Redis 采用单线程模型是为了性能、简化设计以及高效的内存操作,但随着技术的发展,Redis 在 6.0 之后适时引入多线程以优化网络 I/O 和持久化任务的处理,进一步提升了系统的整体性能。
相关文章:

Redis中的线程模型
Redis 的单线程模型详解 Redis 的“单线程”模型主要指的是其 主线程,这个主线程负责从客户端接收请求、解析命令、处理数据和返回响应。为了深入了解 Redis 单线程的具体工作流程,我们可以将其分为以下几个步骤: 接收客户端请求 Redis 的主线…...

[产品管理-77]:技术人需要了解的常见概念:科学、技术、技能、产品、市场、商业模式、运营
目录 一、概念定义 科学 技术 技能 产品 市场 商业模式 运营 二、上述概念在产品创新中的作用 一、概念定义 对于技术人来说,了解并掌握科学、技术、技能、产品、市场、商业模式、运营等常见概念的定义至关重要。以下是这些概念的详细解释: 科…...

鼠标点击(一)与3D视口窗口的交互
(1) (2) (3)...

线程-2-线程概念与控制
main 线程常见寄存器(CR3 EIP IR MMU TLB) CR3是当前进程页表物理内存地址(包不能虚拟地址,不然套娃了) CPU中有寄存器指向task_struct* current EIP:入口虚拟地址 IR:当前命令地址系统总线&a…...

TortoiseSVN提示服务器凭证检核错误:站点名称不符
电脑重装了系统,下载了新版本SVN软件,一切准备就绪,准备大干一场。 打开SVN,一遍一遍的提示【TortoiseSVN提示服务器凭证检核错误:站点名称不符】,一次次的让我接受,终于忍受不了了。 TortoiseSVN提示服务…...

Diffusion Policy——斯坦福机器人UMI所用的扩散策略:从原理到其编码实现(含Diff-Control、ControlNet详解)
前言 本文一开始是属于此文《UMI——斯坦福刷盘机器人:从手持夹持器到动作预测Diffusion Policy(含代码解读)》的第三部分,考虑后Diffusion Policy的重要性很高,加之后续还有一系列基于其的改进工作 故独立成本文,且写的过程中 …...

(动画版)排序算法 -希尔排序
文章目录 1. 希尔排序(Shellsort)1.1 简介1.2 希尔排序的步骤1.3 希尔排序的C实现1.4 时间复杂度1.5 空间复杂度1.6 希尔排序动画 1. 希尔排序(Shellsort) 1.1 简介 希尔排序(Shells Sort),又…...

delphi fmx android 自动更新(二)
自己写了一个升级的类,支持android与windows 1,下载升级包,可以设置进度条 我这里用的fmxui的进度条,你也可以用原生的 http下载我用的nethttpclient, 进度条设置是比较方便的 首先获取下载文件的大小 用nethttpclient.head函数请求文件地址,得到contentlength 接着…...

蓝队知识浅谈(中)
声明:学习视频来自b站up主 泷羽sec,如涉及侵权马上删除文章 感谢泷羽sec 团队的教学 视频地址:蓝队基础之网络七层杀伤链_哔哩哔哩_bilibili 本文主要分享一些蓝队相关的知识。 一、网络杀伤链 网络杀伤链(Cyber Kill Chain&…...

解决vue3+ts打包项目时会生成map文件
在正常未配置的情况下使用npm run build 命令打包,会生成很多的js和map文件,map文件是为了方便我们在生产环境进行更友好的代码调试,但是这样就存一个安全问题;容易被攻击; 解决方法:在package.json文件,重…...

webpack指南
🌈个人主页:前端青山 🔥系列专栏:webpack篇 🔖人终将被年少不可得之物困其一生 依旧青山,本期给大家带来webpack篇专栏内容:webpack-指南 概念 中文: webpack | webpack中文文档 | webpack中文网 英文&…...

关于QUERY_ALL_PACKAGES权限导致Google下架apk
谷歌商店被下架,原因是第三方使用了 QUERY_ALL_PACKAGES 权限; Google在高版本上限制了此权限的使用。当然,并不是 QUERY_ALL_PACKAGES 这个权限没有了,而是被列为敏感权限,必须有充分的理由说明,才允许上架 GP&#…...

优化时钟网络之时钟抖动
Note:文章内容以Xilinx 7系列FPGA进行讲解 1、什么是时钟抖动 时钟抖动就是时钟周期之间出现的偏差。比如一个时钟周期为10ns的时钟,理想情况下,其上升沿会出现在0ns,10ns,20ns时刻,假设某个上升沿出现的时…...

C++《继承》
在之前学习学习C类和对象时我们就初步了解到了C当中有三大特性,分别是封装、继承、多态,通过之前的学习我们已经了解了C的封装特性,那么接下来我们将继续学习另外的两大特性,在此将分为两个章节来分别讲解继承和多态。本篇就先来学…...

微澜:用 OceanBase 搭建基于知识图谱的实时资讯流的应用实践
本文作者: 北京深鉴智源科技有限公司架构师 郑荣凯 本文整理自北京深鉴智源科技有限公司架构师郑荣凯,在《深入浅出 OceanBase 第四期》的分享。 知识图谱是一项综合性的系统工程,需要在在各种应用场景中向用户展示经过分页的一度关系。 微…...

【LeetCode】【算法】538. 把二叉搜索树转换为累加树
LeetCode 538. 把二叉搜索树转换为累加树 题目 给出二叉 搜索 树的根节点,该树的节点值各不相同,请你将其转换为累加树(Greater Sum Tree),使每个节点 node 的新值等于原树中大于或等于 node.val 的值之和。 提醒一下…...

YoloV8改进策略:注意力改进|EPSANet,卷积神经网络上的高效金字塔挤压注意力块|即插即用|代码+改进方法
摘要 论文介绍 本文介绍的论文是“EPSANet:卷积神经网络上的高效金字塔挤压注意力块”,该论文提出了一种新颖、轻量且有效的注意力方法,即金字塔挤压注意力(PSA)模块。论文通过替换ResNet瓶颈块中的 3 3 3 \times 3 3...

Nextflow最佳实践:如何在云上高效处理大规模数据集
1. Nextflow 软件架构介绍 Nextflow 是一个用于简化数据驱动计算流程的工具,可以在各种计算环境中轻松部署。它采用了分布式计算和容器技术,实现了高度模块化、可重复性和可扩展性。NextFlow 的软件架构主要包括以下几个部分: 用户界面&…...

数据结构:顺序表(动态顺序表)
专栏说明:本专栏用于数据结构复习,文章中出现的代码由C语言实现,在专栏中会涉及到部分OJ题目,如对你学习有所帮助,可以点赞鼓励一下博主喔💓 博客主页:Duck Bro 博客主页系列专栏:数…...

springboot040社区医院信息平台
🍅点赞收藏关注 → 添加文档最下方联系方式领取本源代码、数据库🍅 本人在Java毕业设计领域有多年的经验,陆续会更新更多优质的Java实战项目希望你能有所收获,少走一些弯路。🍅关注我不迷路🍅 项目视频 spr…...

windows下QT5.12.11使用MSVC编译器编译mysql驱动并使用详解
1、下载mysql开发库,后面驱动编译的时候需要引用到,下载地址:mysql开发库下载 2、使用everything搜索:msvc-version.conf,用记事本打开,添加:QMAKE_MSC_VER=1909。不然msvc下的mysql源码加载不上。...

c++写一个死锁并且自己解锁
刷算法题: 第一遍:1.看5分钟,没思路看题解 2.通过题解改进自己的解法,并且要写每行的注释以及自己的思路。 3.思考自己做到了题解的哪一步,下次怎么才能做对(总结方法) 4.整理到自己的自媒体平台。 5.再刷重复的类…...

JavaScript方法修改 input type=file 样式
html中的<input type "file">的样式很难修改,又跟页面风格很不匹配。我就尝试了几种方法,但是不管是用label还是用opacity:0都很麻烦,还老是出问题,所以最后还是用JavaScript来解决。 下面附上代码:…...

群控系统服务端开发模式-应用开发-前端个人信息功能
个人信息功能我把他分为了3部分:第一部分是展示登录者信息;第二步就是登录者登录退出信息;第三部分就是修改个人资料。 一、展示登录者信息 1、优先添加固定路由 在根目录下src文件夹下route文件夹下index.js文件中,添加如下代码 …...

【jupyter】文件路径的更改
使用过 jupyter notebook 环境的同行, 都体会过随机生成 .html 静态网页的过程, 虽然文档较小, 但是不堪反复使用积少成多。本文基于windows系统。 找到 runtime 目录 一般 jupyter 默认 runtime 在下述格式目录中 C:\Users\用户名\AppData…...

Ruby编程语言全景解析:从基础到进阶
Ruby是一种动态的、面向对象的编程语言,以其优雅的语法和强大的功能而闻名于世。自从1995年由日本程序员松本行弘(Yukihiro Matsumoto)发布以来,Ruby便迅速成为了开发者中颇受欢迎的编程语言之一。无论是构建简单的脚本还是复杂的…...

Elasticsearch 8.16:适用于生产的混合对话搜索和创新的向量数据量化,其性能优于乘积量化 (PQ)
作者:来自 Elastic Ranjana Devaji, Dana Juratoni Elasticsearch 8.16 引入了 BBQ(Better Binary Quantization - 更好的二进制量化)—— 一种压缩向量化数据的创新方法,其性能优于传统方法,例如乘积量化 (Product Qu…...

解决vscode不能像pycharm一样从其他同级文件夹导包
在vscode中选择:文件-首选项-设置-扩展-Python-settings.json 向setting.json添加如下代码: "terminal.integrated.env.osx": {"PYTHONPATH": "${workspaceFolder}/",},"terminal.integrated.env.linux": {"PYTHON…...

DAY24|回溯算法Part03|LeetCode:93.复原IP地址、78.子集、90.子集II
目录 LeetCode:93.复原IP地址 基本思路 C代码 LeetCode:78.子集 基本思路 C代码 LeetCode:90.子集II 基本思路 C代码 通过used实现去重 通过set实现去重 不使用used和set版本 LeetCode:93.复原IP地址 力扣代码链接 文字讲解:LeetCode:93.复原IP地…...

接口自动化测试做到什么程度的覆盖算是合格的
接口自动化测试的覆盖程度是一个衡量测试质量与效率的重要指标,其“好”的标准并非绝对,而是根据项目特性和团队需求动态调整的结果。然而,有几个原则和实践可以帮助我们确定一个相对合理的覆盖范围,以及为何这些覆盖是必要的。 1…...