当前位置: 首页 > article >正文

单线程 Redis 如何实现高可用?深入图解主从复制与哨兵模式


单线程 Redis 如何实现高可用?深入解析主从复制与哨兵模式


一、主从模式:高可用的基石

主从模式是 Redis 实现高可用的基础架构,通过数据冗余读写分离提升系统可靠性。其核心结构如下:

角色功能
主节点唯一可写节点,接收所有写操作并同步数据到从节点
从节点只读节点,复制主节点数据,分担读请求压力,故障时可能升级为主节点

主从模式的优势

  1. 数据冗余:从节点备份主节点数据,避免单点故障导致数据丢失。
  2. 读写分离:主节点处理写请求,从节点处理读请求,提升并发能力。
  3. 故障恢复:主节点宕机时,从节点可接管服务(需配合哨兵模式)。

二、主从复制:数据同步的核心机制

Redis 主从复制流程分为全量复制增量复制,确保数据一致性:

1. 复制流程
  1. 连接建立:从节点向主节点发送 SLAVEOF <master_ip> <master_port> 命令。
  2. 全量同步(RDB 快照)
    • 主节点生成 RDB 快照文件并发送给从节点。
    • 从节点清空旧数据,加载 RDB 文件完成初始化。
  3. 增量同步(复制缓冲区)
    • 主节点将新写入命令存入缓冲区(repl_backlog)。
    • 从节点持续接收并执行缓冲区中的命令,保持数据实时同步。

主从复制示意图

1. 从节点连接主节点+----------------+          +----------------+|  主节点 (Master) | <-------> | 从节点 (Slave)  |+----------------+          +----------------+│                            ││       2. 发送SYNC命令       ││ --------------------------> ││                            ││    3. 生成并发送RDB快照     ││ <-------------------------- ││                            ││   4. 增量同步(复制缓冲区)  ││ --------------------------> │
2. 断线重连优化
  • 若从节点断开后重连,主节点根据 repl_backlog 中的偏移量(repl_offset)决定是否增量同步。
  • 若偏移量不在缓冲区范围内,触发全量同步。

三、哨兵模式:自动故障转移的守护者

哨兵(Sentinel) 是 Redis 官方提供的分布式监控系统,用于实现主从集群的自动故障转移。一个哨兵集群通常由 3 个以上哨兵节点组成。

1. 哨兵的核心功能
功能说明
监控定期检测主从节点是否存活(每秒发送 PING 命令)
故障判定若主节点未响应超过阈值,哨兵集群投票判定其“主观下线” → “客观下线”
自动故障转移选举新主节点,通知从节点切换主节点,更新客户端配置
配置管理提供主节点地址查询服务,客户端通过哨兵获取最新主节点信息
通知报警通过 Pub/Sub 机制向管理员发送故障告警

哨兵监控示意图

+----------------+       +----------------+       +----------------+
|  哨兵节点1       |       |  哨兵节点2       |       |  哨兵节点3       |
|  监控主从状态    | <---> |  监控主从状态    | <---> |  监控主从状态    |
+----------------+       +----------------+       +----------------+▲                           ▲                           ▲│                           │                           │└────── 主从集群 ──────────────┘                           │+----------------+          +----------------+|  主节点 (Master) | <------> | 从节点 (Slave)  |+----------------+          +----------------+
2. 主节点崩溃时的选举机制

当主节点崩溃时,哨兵需从从节点中选出数据最完整、状态最优的新主节点:

数据偏移量对比示意图

主节点 repl_offset: 1000│├── 从节点1 repl_offset: 980  (延迟20)│└── 从节点2 repl_offset: 1000 (最新)

选举流程

  1. 筛选候选从节点:排除不健康或数据陈旧的节点。
  2. 优先级排序
    • 优先选择 slave-priority 配置值最小的节点。
    • 优先级相同则选择 repl_offset 最大的节点。
    • 偏移量相同则选择运行 ID(run_id)字典序最小的节点。
  3. 执行切换
    • 新主节点执行 SLAVEOF no one 升级为主节点。
    • 其他从节点切换至新主节点。

故障转移流程示意图

1. 主节点宕机+----------------+          +----------------+|  主节点 (宕机)  |          | 从节点 (Slave)  |+----------------+          +----------------+│                            ▲X                            ││                            │
2. 哨兵检测到故障+----------------+          +----------------+|  哨兵节点集群    | --------> | 从节点 (候选)   |+----------------+          +----------------+│                            │
3. 选举新主节点│                            │▼                            ▼+----------------+          +----------------+|  新主节点       | <-------- | 更新从节点指向  |+----------------+          +----------------+

四、单线程模型下的高可用优势

Redis 的单线程模型虽然无法利用多核 CPU,但在高可用场景下仍有独特优势:

  1. 简化设计:避免多线程锁竞争,降低故障转移的复杂度。
  2. 顺序执行:主从复制和哨兵操作按顺序执行,避免并发冲突。
  3. 低延迟:单线程处理请求,配合非阻塞 I/O,快速响应故障切换。

五、主从复制与哨兵模式的局限性

场景问题解决方案
脑裂(Split Brain)网络分区导致出现多个主节点合理配置 min-slaves-to-writemin-slaves-max-lag
数据丢失主节点未同步数据即崩溃启用 appendfsync always 或使用 WAIT 命令
性能瓶颈单主节点写入压力过大升级到 Redis Cluster 分片集群

六、总结

通过 主从模式 + 哨兵模式,单线程 Redis 实现了高可用架构:

  1. 主从复制:保障数据冗余和读写分离。
  2. 哨兵集群:实现自动故障检测与转移,基于复制偏移量和优先级选举最优从节点。

适用场景

  • 中小规模应用(单主节点写入压力不超过单线程性能上限)。
  • 对高可用要求较高但无需强一致性的场景(主从复制存在秒级延迟)。

最终建议

  • 生产环境中部署至少3个哨兵节点,跨物理机架或可用区部署,避免网络分区导致误判。
  • 监控主从节点的 repl_offset 差异,确保数据同步健康。
  • 超大集群或更高性能需求时,可采用 Redis Cluster 分片集群

Redis 高可用全景架构图

+----------------+       +----------------+       +----------------+
|  哨兵节点1       |       |  哨兵节点2       |       |  哨兵节点3       |
+----------------+       +----------------+       +----------------+│                           │                           │└─────── 监控 ──────┐         └─────────── 监控 ───────────┘▼                          +----------------+          +----------------+|  主节点 (Master) | <------> | 从节点 (Slave)  |+----------------+          +----------------+▲                           ▲│                           │└───── 客户端读写请求 ────────┘

相关文章:

单线程 Redis 如何实现高可用?深入图解主从复制与哨兵模式

单线程 Redis 如何实现高可用&#xff1f;深入解析主从复制与哨兵模式 一、主从模式&#xff1a;高可用的基石 主从模式是 Redis 实现高可用的基础架构&#xff0c;通过数据冗余和读写分离提升系统可靠性。其核心结构如下&#xff1a; 角色功能主节点唯一可写节点&#xff0c…...

ubuntu 启动不起来,光标闪烁 解决方法

ubuntu 启动不起来&#xff0c;光标闪烁 进不了系统&#xff0c;解决方法 按ctrl alt f2&#xff0c;进入终端&#xff0c;登录。 jounal -b 查看启动日志。 发现是找不到显卡驱动程序。 解决方法&#xff1a; 卸载nvidia程序。 sudo systemctl stop gdm # 适用于GNOME…...

RV1126采集VI视频数据流

这节分享一下通过rkmedia的api获取RV1126的VI视频流&#xff0c;但是具体的已经在第一个推流项目已经说了。这里更多是回顾一下这部分的api。 采集vi数据实现 VI_CHN_ATTR_S&#xff0c;视频采集的VI模块。 int main() {int ret;VI_CHN_ATTR_S vi;vi.pcVideoNode CAMERA_PAH…...

Linux(Centos 7.6)命令详解:vi

1.命令作用 vi/vim 是Linux 系统内置不可或缺的文本编辑命令&#xff0c;vim 是vi 的加强版本&#xff0c;兼容vi 的所有指令&#xff0c;不仅能编辑文本&#xff0c;而且还具有shell 程序编辑的功能&#xff0c;可以不同颜色的字体来辨别语法的正确性。 2.命令语法 usage: …...

音视频入门基础:RTP专题(15)——FFmpeg源码中,获取RTP的视频信息的实现

一、引言 通过FFmpeg命令可以获取到SDP文件描述的RTP流的视频压缩编码格式、色彩格式&#xff08;像素格式&#xff09;、分辨率、帧率信息&#xff1a; ffmpeg -protocol_whitelist "file,rtp,udp" -i XXX.sdp 本文以H.264为例讲述FFmpeg到底是从哪个地方获取到这…...

【2025小白版】计算复试/保研机试模板(个人总结非GPT生成)附代码

一、编程语言选择 很多高校在机试中对编程语言都有明确规定&#xff0c;像复旦大学计算机学院就说明可选择 C、C 或 Java 语言答题&#xff0c;还支持 C11&#xff08;gcc5.4&#xff09;&#xff0c;C14&#xff08;g5.4&#xff09;&#xff0c;Java (openjdk1.8&#xff09…...

Linux查看TP6 command定时任务并重启

TP6定时任务设置: 1、在项目根目录/app/command 目录下创建定时任务类文件MemberSubmit.php 使用 $this->setName(memberSubmit) 方法设置名称为 memberSubmit 的定时任务。 namespace app\command;use think\console\Command; use think\console\Input; use think\conso…...

系统运维分级掌握知识技能

以下是针对系统运维工程师的初中高三个等级的详细学习路线规划&#xff0c;结合理论知识与实践技能&#xff0c;帮助您逐步成长为专业运维人员&#xff1a; 初级阶段&#xff08;入门基础&#xff09; 目标&#xff1a;掌握运维基础工具与概念&#xff0c;能独立完成基础运维任…...

aardio - 虚表 —— 两个虚表之间互相拖动交换数据

插入到虚表末尾的方法&#xff1a; import win.ui; import godking.vlistEx; /*DSG{{*/ mainForm win.form(text"vlistEx - table adapter";right849;bottom578;border"thin") mainForm.add( radiobutton{cls"radiobutton";text"移动&qu…...

第一:goland安装

GOPROXY (会话临时性)&#xff0c;长久的可以在配置文件中配置 go env -w GOPROXYhttps://goproxy.cn,direct 长久的&#xff0c;在~/.bashrc文件中添加&#xff1a; export GOPROXYhttps://goproxy.cn,direct &#xff0d;&#xff0d;&#xff0d;&#xff0d;&#xff0d…...

Dockerfile 深入浅出:从基础到进阶全解析

Dockerfile 深入浅出&#xff1a;从基础到进阶全解析 各位同学&#xff0c;大家好&#xff01;欢迎来到今天的 Dockerfile 课程。Docker 技术在当今的软件开发和部署领域可以说是非常热门&#xff0c;而 Dockerfile 作为构建 Docker 镜像的关键文件&#xff0c;掌握它对于我们…...

Mybatis中的分页操作,如何使用PageHelper进行分页,以及Spring Boot整合Mybatis Plus分页

目的&#xff1a; 学会分页功能&#xff0c;学会分页方法 场景&#xff1a; 将下面的数据进行分页&#xff1a; 文章目录 Mybatis 单独使用分页&#xff08;没有整合&#xff09;1. PageHelper 插件 Spring Boot 整合 Mybatis Plus 使用分页1. selectPage 方法实现分页2. selec…...

python学习第三天

条件判断 条件判断使用if、elif和else关键字。它们用于根据条件执行不同的代码块。 # 条件判断 age 18 if age < 18:print("你还是个孩子&#xff01;") elif age 18:print("永远十八岁&#xff01;") else:print("你还年轻&#xff01;")…...

CSS Overflow 属性详解

CSS Overflow 属性详解 在网页设计和开发中,CSS Overflow 属性是一个非常重要的特性,它决定了当内容超出其容器大小时应该如何处理。本文将详细介绍 CSS Overflow 属性的相关知识,包括其语法、作用、常用属性值以及一些实际应用场景。 1. CSS Overflow 属性概述 CSS Over…...

深度解析:视频软编码与硬编码的优劣对比

视频编码 一、基本原理与核心技术 压缩原理 通过时空冗余消除实现数据压缩&#xff1a; 空间冗余&#xff1a;利用帧内预测&#xff08;如DC/角度预测&#xff09;消除单帧内相邻像素相似性。时间冗余&#xff1a;运动估计与补偿技术&#xff08;ME/MC&#xff09;减少连续帧间…...

【网络安全】API安全防护完整指南

文章目录 API安全为什么 API 安全性重要?API 安全性与通用应用程序安全性的区别传统 Web 安全的主要特征API 安全的关键特征OWASP API 前 10 大安全威胁API1:2019 - 破坏对象级授权(Broken Object-Level Authorization)API2:2019 - 破坏用户身份验证(Broken User Authentic…...

Docker 学习(四)——Dockerfile 创建镜像

Dockerfile是一个文本格式的配置文件&#xff0c;其内包含了一条条的指令(Instruction)&#xff0c;每一条指令构建一层&#xff0c;因此每一条指令的内容&#xff0c;就是描述该层应当如何构建。有了Dockerfile&#xff0c;当我们需要定制自己额外的需求时&#xff0c;只需在D…...

本地部署 DeepSeek:从 Ollama 配置到 Spring Boot 集成

前言 随着人工智能技术的迅猛发展&#xff0c;越来越多的开发者希望在本地环境中部署和调用 AI 模型&#xff0c;以满足特定的业务需求。本文将详细介绍如何在本地环境中使用 Ollama 配置 DeepSeek 模型&#xff0c;并在 IntelliJ IDEA 中创建一个 Spring Boot 项目来调用该模型…...

算法之 前缀和

文章目录 前缀和基础3427.变长子数组求和 前缀和与哈希表1524.和为奇数的子数组数目 距离和1685.有序数组中绝对值之和 前缀异或和1177.构建回文串检测 其他一维前缀和1310.子数组异或查询 二维前缀和1314.矩阵区域和 前缀和&#xff0c;就是定义pre[i] 为nums的前i个元素的和值…...

第4章 Function 语意学1: Member的各种调用方式

一、Nonstatic member functions C 的设计准则之一就是:nonstatic member function 至少必须和一般的nonmember function 有相同的效率。也就是说&#xff0c;如果我们要在以下两个函数之间作选择: float magnitude3d( const Point3d * this ) { ... } float Point3d::magnit…...

[特殊字符] Django 常用命令

&#x1f680; Django 常用命令大全&#xff1a;从开发到部署 Django 提供了许多实用的命令&#xff0c;可以用于 数据库管理、调试、测试、用户管理、运行服务器、部署 等。 本教程将详细介绍 Django 开发中最常用的命令&#xff0c;并提供 示例&#xff0c;帮助你更高…...

机器视觉运动控制一体机在天地盖同步跟随贴合解决方案

市场应用背景 纸盒天地盖是一种包装形式&#xff0c;广泛应用于消费电子、食品礼盒、奢侈品及化妆品等领域。其采用高强度纸板&#xff0c;经过预组装处理&#xff0c;结构坚固稳定&#xff0c;能有效保护产品并提升品牌形象。随着包装行业快速发展&#xff0c;市场对天地盖的…...

B站文生视频模型工程实践

1.前言 近年来&#xff0c;AI 内容生成&#xff08;AIGC&#xff09;领域的快速发展令人雀跃&#xff0c;OpenAI 在 2023 年初推出大型语言模型&#xff08;LLM&#xff09;GPT-4 受到了学术界和工业界的极大关注。OpenAI 随后在 2024 年初推出文生视频&#xff08;T2V&#xf…...

嵌入式开发:傅里叶变换(5):基于STM32,实现CMSIS中的DSP库

目录 步骤 1&#xff1a;准备工作 步骤 2&#xff1a;创建 Keil 项目&#xff0c;并配置工程 步骤 3&#xff1a;在MDK工程上添加 CMSIS-DSP 库 步骤 5&#xff1a;编写代码 步骤 6&#xff1a;配置时钟和优化 步骤 7&#xff1a;调试与验证 步骤 8&#xff1a;优化和调…...

【人工智能】GPT-4 vs DeepSeek-R1:谁主导了2025年的AI技术竞争?

前言 2025年&#xff0c;人工智能技术将迎来更加激烈的竞争。随着OpenAI的GPT-4和中国初创公司DeepSeek的DeepSeek-R1在全球范围内崭露头角&#xff0c;AI技术的竞争格局开始发生变化。这篇文章将详细对比这两款AI模型&#xff0c;从技术背景、应用领域、性能、成本效益等多个方…...

【Python项目】基于深度学习的车辆特征分析系统

【Python项目】基于深度学习的车辆特征分析系统 技术简介&#xff1a;采用Python技术、MySQL数据库、卷积神经网络&#xff08;CNN&#xff09;等实现。 系统简介&#xff1a;该系统基于深度学习技术&#xff0c;特别是卷积神经网络&#xff08;CNN&#xff09;&#xff0c;用…...

【江科大STM32】TIM输入捕获模式PWMI模式测频率

一、输入捕获测频率 接线图&#xff1a; 测信号的输入引脚为PA6&#xff0c;信号从PA6进来&#xff0c;待测的PWM信号也是STM32自己生成的&#xff0c;输出引脚是PA0&#xff0c;所以接线这里直接用一根线将PA0引到PA6就可以了。 如果有信号发生器的话&#xff0c;也可以设置成…...

K8S学习之基础十六:k8s中Deployment更新策略

滚动更新 滚动更新是一种自动化程度较高的发布方式、用户体验比较平滑、是目前成熟型技术组织采用的主流发布方式&#xff0c;一次滚动发布一般有若干发布批次组成&#xff0c;每批的数量一般都是可配置的&#xff0c;可通过发布模板定义&#xff0c;例如第一批10%&#xff0c…...

Django 5实用指南(十二)异步处理与Celery集成

在现代Web应用中&#xff0c;异步任务的处理是提升应用性能和响应速度的关键。Django5提供了对异步任务的支持&#xff0c;尤其是通过集成Celery来处理后台任务。Celery是一个强大的分布式任务队列&#xff0c;可以让我们将耗时的操作&#xff08;如发送邮件、生成报告、处理图…...

EtherNet/IP转Modbus解析基于网关模块的罗克韦尔PLC与Modbus上位机协议转换通讯案例

在工业自动化控制系统中&#xff0c;常常会遇到不同品牌和通信协议的设备需要协同工作的情况。本案例中&#xff0c;客户现场采用了 AB PLC&#xff0c;但需要控制的变频器仅支持 Modbus 协议。为了实现 AB PLC 对变频器的有效控制与监控&#xff0c;引入了捷米特 JM-EIP-RTU 网…...