单线程 Redis 如何实现高可用?深入图解主从复制与哨兵模式
单线程 Redis 如何实现高可用?深入解析主从复制与哨兵模式
一、主从模式:高可用的基石
主从模式是 Redis 实现高可用的基础架构,通过数据冗余和读写分离提升系统可靠性。其核心结构如下:
| 角色 | 功能 |
|---|---|
| 主节点 | 唯一可写节点,接收所有写操作并同步数据到从节点 |
| 从节点 | 只读节点,复制主节点数据,分担读请求压力,故障时可能升级为主节点 |
主从模式的优势:
- 数据冗余:从节点备份主节点数据,避免单点故障导致数据丢失。
- 读写分离:主节点处理写请求,从节点处理读请求,提升并发能力。
- 故障恢复:主节点宕机时,从节点可接管服务(需配合哨兵模式)。
二、主从复制:数据同步的核心机制
Redis 主从复制流程分为全量复制和增量复制,确保数据一致性:
1. 复制流程
- 连接建立:从节点向主节点发送
SLAVEOF <master_ip> <master_port>命令。 - 全量同步(RDB 快照):
- 主节点生成 RDB 快照文件并发送给从节点。
- 从节点清空旧数据,加载 RDB 文件完成初始化。
- 增量同步(复制缓冲区):
- 主节点将新写入命令存入缓冲区(
repl_backlog)。 - 从节点持续接收并执行缓冲区中的命令,保持数据实时同步。
- 主节点将新写入命令存入缓冲区(
主从复制示意图
1. 从节点连接主节点+----------------+ +----------------+| 主节点 (Master) | <-------> | 从节点 (Slave) |+----------------+ +----------------+│ ││ 2. 发送SYNC命令 ││ --------------------------> ││ ││ 3. 生成并发送RDB快照 ││ <-------------------------- ││ ││ 4. 增量同步(复制缓冲区) ││ --------------------------> │
2. 断线重连优化
- 若从节点断开后重连,主节点根据
repl_backlog中的偏移量(repl_offset)决定是否增量同步。 - 若偏移量不在缓冲区范围内,触发全量同步。
三、哨兵模式:自动故障转移的守护者
哨兵(Sentinel) 是 Redis 官方提供的分布式监控系统,用于实现主从集群的自动故障转移。一个哨兵集群通常由 3 个以上哨兵节点组成。
1. 哨兵的核心功能
| 功能 | 说明 |
|---|---|
| 监控 | 定期检测主从节点是否存活(每秒发送 PING 命令) |
| 故障判定 | 若主节点未响应超过阈值,哨兵集群投票判定其“主观下线” → “客观下线” |
| 自动故障转移 | 选举新主节点,通知从节点切换主节点,更新客户端配置 |
| 配置管理 | 提供主节点地址查询服务,客户端通过哨兵获取最新主节点信息 |
| 通知报警 | 通过 Pub/Sub 机制向管理员发送故障告警 |
哨兵监控示意图
+----------------+ +----------------+ +----------------+
| 哨兵节点1 | | 哨兵节点2 | | 哨兵节点3 |
| 监控主从状态 | <---> | 监控主从状态 | <---> | 监控主从状态 |
+----------------+ +----------------+ +----------------+▲ ▲ ▲│ │ │└────── 主从集群 ──────────────┘ │+----------------+ +----------------+| 主节点 (Master) | <------> | 从节点 (Slave) |+----------------+ +----------------+
2. 主节点崩溃时的选举机制
当主节点崩溃时,哨兵需从从节点中选出数据最完整、状态最优的新主节点:
数据偏移量对比示意图
主节点 repl_offset: 1000│├── 从节点1 repl_offset: 980 (延迟20)│└── 从节点2 repl_offset: 1000 (最新)
选举流程:
- 筛选候选从节点:排除不健康或数据陈旧的节点。
- 优先级排序:
- 优先选择
slave-priority配置值最小的节点。 - 优先级相同则选择
repl_offset最大的节点。 - 偏移量相同则选择运行 ID(
run_id)字典序最小的节点。
- 优先选择
- 执行切换:
- 新主节点执行
SLAVEOF no one升级为主节点。 - 其他从节点切换至新主节点。
- 新主节点执行
故障转移流程示意图
1. 主节点宕机+----------------+ +----------------+| 主节点 (宕机) | | 从节点 (Slave) |+----------------+ +----------------+│ ▲X ││ │
2. 哨兵检测到故障+----------------+ +----------------+| 哨兵节点集群 | --------> | 从节点 (候选) |+----------------+ +----------------+│ │
3. 选举新主节点│ │▼ ▼+----------------+ +----------------+| 新主节点 | <-------- | 更新从节点指向 |+----------------+ +----------------+
四、单线程模型下的高可用优势
Redis 的单线程模型虽然无法利用多核 CPU,但在高可用场景下仍有独特优势:
- 简化设计:避免多线程锁竞争,降低故障转移的复杂度。
- 顺序执行:主从复制和哨兵操作按顺序执行,避免并发冲突。
- 低延迟:单线程处理请求,配合非阻塞 I/O,快速响应故障切换。
五、主从复制与哨兵模式的局限性
| 场景 | 问题 | 解决方案 |
|---|---|---|
| 脑裂(Split Brain) | 网络分区导致出现多个主节点 | 合理配置 min-slaves-to-write 和 min-slaves-max-lag |
| 数据丢失 | 主节点未同步数据即崩溃 | 启用 appendfsync always 或使用 WAIT 命令 |
| 性能瓶颈 | 单主节点写入压力过大 | 升级到 Redis Cluster 分片集群 |
六、总结
通过 主从模式 + 哨兵模式,单线程 Redis 实现了高可用架构:
- 主从复制:保障数据冗余和读写分离。
- 哨兵集群:实现自动故障检测与转移,基于复制偏移量和优先级选举最优从节点。
适用场景:
- 中小规模应用(单主节点写入压力不超过单线程性能上限)。
- 对高可用要求较高但无需强一致性的场景(主从复制存在秒级延迟)。
最终建议:
- 生产环境中部署至少3个哨兵节点,跨物理机架或可用区部署,避免网络分区导致误判。
- 监控主从节点的
repl_offset差异,确保数据同步健康。 - 超大集群或更高性能需求时,可采用 Redis Cluster 分片集群。
Redis 高可用全景架构图
+----------------+ +----------------+ +----------------+
| 哨兵节点1 | | 哨兵节点2 | | 哨兵节点3 |
+----------------+ +----------------+ +----------------+│ │ │└─────── 监控 ──────┐ └─────────── 监控 ───────────┘▼ +----------------+ +----------------+| 主节点 (Master) | <------> | 从节点 (Slave) |+----------------+ +----------------+▲ ▲│ │└───── 客户端读写请求 ────────┘
相关文章:
单线程 Redis 如何实现高可用?深入图解主从复制与哨兵模式
单线程 Redis 如何实现高可用?深入解析主从复制与哨兵模式 一、主从模式:高可用的基石 主从模式是 Redis 实现高可用的基础架构,通过数据冗余和读写分离提升系统可靠性。其核心结构如下: 角色功能主节点唯一可写节点,…...
ubuntu 启动不起来,光标闪烁 解决方法
ubuntu 启动不起来,光标闪烁 进不了系统,解决方法 按ctrl alt f2,进入终端,登录。 jounal -b 查看启动日志。 发现是找不到显卡驱动程序。 解决方法: 卸载nvidia程序。 sudo systemctl stop gdm # 适用于GNOME…...
RV1126采集VI视频数据流
这节分享一下通过rkmedia的api获取RV1126的VI视频流,但是具体的已经在第一个推流项目已经说了。这里更多是回顾一下这部分的api。 采集vi数据实现 VI_CHN_ATTR_S,视频采集的VI模块。 int main() {int ret;VI_CHN_ATTR_S vi;vi.pcVideoNode CAMERA_PAH…...
Linux(Centos 7.6)命令详解:vi
1.命令作用 vi/vim 是Linux 系统内置不可或缺的文本编辑命令,vim 是vi 的加强版本,兼容vi 的所有指令,不仅能编辑文本,而且还具有shell 程序编辑的功能,可以不同颜色的字体来辨别语法的正确性。 2.命令语法 usage: …...
音视频入门基础:RTP专题(15)——FFmpeg源码中,获取RTP的视频信息的实现
一、引言 通过FFmpeg命令可以获取到SDP文件描述的RTP流的视频压缩编码格式、色彩格式(像素格式)、分辨率、帧率信息: ffmpeg -protocol_whitelist "file,rtp,udp" -i XXX.sdp 本文以H.264为例讲述FFmpeg到底是从哪个地方获取到这…...
【2025小白版】计算复试/保研机试模板(个人总结非GPT生成)附代码
一、编程语言选择 很多高校在机试中对编程语言都有明确规定,像复旦大学计算机学院就说明可选择 C、C 或 Java 语言答题,还支持 C11(gcc5.4),C14(g5.4),Java (openjdk1.8)…...
Linux查看TP6 command定时任务并重启
TP6定时任务设置: 1、在项目根目录/app/command 目录下创建定时任务类文件MemberSubmit.php 使用 $this->setName(memberSubmit) 方法设置名称为 memberSubmit 的定时任务。 namespace app\command;use think\console\Command; use think\console\Input; use think\conso…...
系统运维分级掌握知识技能
以下是针对系统运维工程师的初中高三个等级的详细学习路线规划,结合理论知识与实践技能,帮助您逐步成长为专业运维人员: 初级阶段(入门基础) 目标:掌握运维基础工具与概念,能独立完成基础运维任…...
aardio - 虚表 —— 两个虚表之间互相拖动交换数据
插入到虚表末尾的方法: import win.ui; import godking.vlistEx; /*DSG{{*/ mainForm win.form(text"vlistEx - table adapter";right849;bottom578;border"thin") mainForm.add( radiobutton{cls"radiobutton";text"移动&qu…...
第一:goland安装
GOPROXY (会话临时性),长久的可以在配置文件中配置 go env -w GOPROXYhttps://goproxy.cn,direct 长久的,在~/.bashrc文件中添加: export GOPROXYhttps://goproxy.cn,direct -----…...
Dockerfile 深入浅出:从基础到进阶全解析
Dockerfile 深入浅出:从基础到进阶全解析 各位同学,大家好!欢迎来到今天的 Dockerfile 课程。Docker 技术在当今的软件开发和部署领域可以说是非常热门,而 Dockerfile 作为构建 Docker 镜像的关键文件,掌握它对于我们…...
Mybatis中的分页操作,如何使用PageHelper进行分页,以及Spring Boot整合Mybatis Plus分页
目的: 学会分页功能,学会分页方法 场景: 将下面的数据进行分页: 文章目录 Mybatis 单独使用分页(没有整合)1. PageHelper 插件 Spring Boot 整合 Mybatis Plus 使用分页1. selectPage 方法实现分页2. selec…...
python学习第三天
条件判断 条件判断使用if、elif和else关键字。它们用于根据条件执行不同的代码块。 # 条件判断 age 18 if age < 18:print("你还是个孩子!") elif age 18:print("永远十八岁!") else:print("你还年轻!")…...
CSS Overflow 属性详解
CSS Overflow 属性详解 在网页设计和开发中,CSS Overflow 属性是一个非常重要的特性,它决定了当内容超出其容器大小时应该如何处理。本文将详细介绍 CSS Overflow 属性的相关知识,包括其语法、作用、常用属性值以及一些实际应用场景。 1. CSS Overflow 属性概述 CSS Over…...
深度解析:视频软编码与硬编码的优劣对比
视频编码 一、基本原理与核心技术 压缩原理 通过时空冗余消除实现数据压缩: 空间冗余:利用帧内预测(如DC/角度预测)消除单帧内相邻像素相似性。时间冗余:运动估计与补偿技术(ME/MC)减少连续帧间…...
【网络安全】API安全防护完整指南
文章目录 API安全为什么 API 安全性重要?API 安全性与通用应用程序安全性的区别传统 Web 安全的主要特征API 安全的关键特征OWASP API 前 10 大安全威胁API1:2019 - 破坏对象级授权(Broken Object-Level Authorization)API2:2019 - 破坏用户身份验证(Broken User Authentic…...
Docker 学习(四)——Dockerfile 创建镜像
Dockerfile是一个文本格式的配置文件,其内包含了一条条的指令(Instruction),每一条指令构建一层,因此每一条指令的内容,就是描述该层应当如何构建。有了Dockerfile,当我们需要定制自己额外的需求时,只需在D…...
本地部署 DeepSeek:从 Ollama 配置到 Spring Boot 集成
前言 随着人工智能技术的迅猛发展,越来越多的开发者希望在本地环境中部署和调用 AI 模型,以满足特定的业务需求。本文将详细介绍如何在本地环境中使用 Ollama 配置 DeepSeek 模型,并在 IntelliJ IDEA 中创建一个 Spring Boot 项目来调用该模型…...
算法之 前缀和
文章目录 前缀和基础3427.变长子数组求和 前缀和与哈希表1524.和为奇数的子数组数目 距离和1685.有序数组中绝对值之和 前缀异或和1177.构建回文串检测 其他一维前缀和1310.子数组异或查询 二维前缀和1314.矩阵区域和 前缀和,就是定义pre[i] 为nums的前i个元素的和值…...
第4章 Function 语意学1: Member的各种调用方式
一、Nonstatic member functions C 的设计准则之一就是:nonstatic member function 至少必须和一般的nonmember function 有相同的效率。也就是说,如果我们要在以下两个函数之间作选择: float magnitude3d( const Point3d * this ) { ... } float Point3d::magnit…...
[特殊字符] Django 常用命令
🚀 Django 常用命令大全:从开发到部署 Django 提供了许多实用的命令,可以用于 数据库管理、调试、测试、用户管理、运行服务器、部署 等。 本教程将详细介绍 Django 开发中最常用的命令,并提供 示例,帮助你更高…...
机器视觉运动控制一体机在天地盖同步跟随贴合解决方案
市场应用背景 纸盒天地盖是一种包装形式,广泛应用于消费电子、食品礼盒、奢侈品及化妆品等领域。其采用高强度纸板,经过预组装处理,结构坚固稳定,能有效保护产品并提升品牌形象。随着包装行业快速发展,市场对天地盖的…...
B站文生视频模型工程实践
1.前言 近年来,AI 内容生成(AIGC)领域的快速发展令人雀跃,OpenAI 在 2023 年初推出大型语言模型(LLM)GPT-4 受到了学术界和工业界的极大关注。OpenAI 随后在 2024 年初推出文生视频(T2V…...
嵌入式开发:傅里叶变换(5):基于STM32,实现CMSIS中的DSP库
目录 步骤 1:准备工作 步骤 2:创建 Keil 项目,并配置工程 步骤 3:在MDK工程上添加 CMSIS-DSP 库 步骤 5:编写代码 步骤 6:配置时钟和优化 步骤 7:调试与验证 步骤 8:优化和调…...
【人工智能】GPT-4 vs DeepSeek-R1:谁主导了2025年的AI技术竞争?
前言 2025年,人工智能技术将迎来更加激烈的竞争。随着OpenAI的GPT-4和中国初创公司DeepSeek的DeepSeek-R1在全球范围内崭露头角,AI技术的竞争格局开始发生变化。这篇文章将详细对比这两款AI模型,从技术背景、应用领域、性能、成本效益等多个方…...
【Python项目】基于深度学习的车辆特征分析系统
【Python项目】基于深度学习的车辆特征分析系统 技术简介:采用Python技术、MySQL数据库、卷积神经网络(CNN)等实现。 系统简介:该系统基于深度学习技术,特别是卷积神经网络(CNN),用…...
【江科大STM32】TIM输入捕获模式PWMI模式测频率
一、输入捕获测频率 接线图: 测信号的输入引脚为PA6,信号从PA6进来,待测的PWM信号也是STM32自己生成的,输出引脚是PA0,所以接线这里直接用一根线将PA0引到PA6就可以了。 如果有信号发生器的话,也可以设置成…...
K8S学习之基础十六:k8s中Deployment更新策略
滚动更新 滚动更新是一种自动化程度较高的发布方式、用户体验比较平滑、是目前成熟型技术组织采用的主流发布方式,一次滚动发布一般有若干发布批次组成,每批的数量一般都是可配置的,可通过发布模板定义,例如第一批10%,…...
Django 5实用指南(十二)异步处理与Celery集成
在现代Web应用中,异步任务的处理是提升应用性能和响应速度的关键。Django5提供了对异步任务的支持,尤其是通过集成Celery来处理后台任务。Celery是一个强大的分布式任务队列,可以让我们将耗时的操作(如发送邮件、生成报告、处理图…...
EtherNet/IP转Modbus解析基于网关模块的罗克韦尔PLC与Modbus上位机协议转换通讯案例
在工业自动化控制系统中,常常会遇到不同品牌和通信协议的设备需要协同工作的情况。本案例中,客户现场采用了 AB PLC,但需要控制的变频器仅支持 Modbus 协议。为了实现 AB PLC 对变频器的有效控制与监控,引入了捷米特 JM-EIP-RTU 网…...
