当前位置: 首页 > article >正文

Redis7——基础篇(六)

 前言:此篇文章系本人学习过程中记录下来的笔记,里面难免会有不少欠缺的地方,诚心期待大家多多给予指教。

基础篇:

  1. Redis(一)
  2. Redis(二)
  3. Redis(三)
  4. Redis(四)
  5. Redis(五)

接上期内容:上期完成了Redis主从模式的学习。下面开始学习Redis的哨兵模式(重点),话不多说,直接发车。


一、定义

Q:既然已经有了主从模式,为什么还要推出哨兵模式呢?

A:在主从模式的架构里,当 Master 节点发生宕机故障时,从节点并不会自动晋升为新的Master。要是 Master 节点在短时间内无法恢复正常运行,系统就会陷入一个棘手的状况。此时,系统仅仅保留了读操作的功能,却丧失了写操作的能力。这种读写能力的失衡,显然无法满足实际业务对系统高可用性和数据完整性的要求。

而哨兵模式正是为了解决上述主从模式的痛点而诞生。它通过一组Sentinel节点来监控主从架构中的Redis实例,当主节点出现故障时,自动将一个从节点晋升为主节点,并让其他从节点重新指向新的主节点,从而实现自动故障转移,保证系统的高可用性。俗称:无人值守运维。


二、功能

  1. 主从监控:哨兵节点不断地检查主节点和从节点是否正常运行,通过定期发送 PING 命令来判断节点的健康状态。
  2. 消息通知:当某个 Redis 实例出现问题时,哨兵可以通过 API 向管理员或其他应用程序发送通知,以便及时处理。
  3. 自动故障转移:这是哨兵模式的核心功能。当主节点不可用时,哨兵会在从节点中选举一个新的主节点,并调整其他从节点的配置,使其指向新的主节点。
  4. 配置中心:客户端可以通过连接哨兵来获取主节点信息。

三、实操

(一)、架构说明

3个哨兵,1个Master,2个Slave。哨兵自动监控和维护集群,不存放数据,只是吹哨人,Master负责存,Slave负责读。

由于机器硬件问题,同时启动6台虚拟机,电脑吃不消,所以将哨兵的集群放在6379上。

(二)、实操步骤

1、拷贝原生配置

拷贝redis压缩目录下的sentinel.conf到/myredis下。


2、修改参数配置

2.1、参数说明

常用参数:

bind:服务监听地址,用于客户端连接,默认本机

daemonize:是否以后台daemon方式运行

protected-mode:安全保护模式
port:端口
logfile:日志文件路径
pidfilepid:文件路径
dir:工作目录

sentinel monitor <master-name> <ip> <redis-port> <quorum>:设置要监控的master服务器,quorum代表确认客观下线的最少的哨兵数量

sentinel auth-pass <master-name> <password>:连接Master的密码

其他参数:

sentinel down-after-milliseconds <master-name> <milliseconds>:指定多少毫秒之后,主节点没有应答哨兵,此时哨兵主观上认为主节点下线


sentinel parallel-syncs <master-name> <nums>:表示允许并行同步的slave个数,当Master挂了后,哨兵会选出新的Master,此时,剩余的slave会向新的master发起同步数据


sentinel failover-timeout <master-name> <milliseconds>:故障转移的超时时间,进行故障转移时,如果超过设置的毫秒,表示故障转移失败


sentinel notification-script <master-name> <script-path> :配置当某一事件发生时所需要执行的脚本


sentinel client-reconfig-script <master-name> <script-path>:客户端重新配置主节点参数脚本


2.2、修改配置

由于sentinel集群是在6379上,所以需要配置3份sentinel.conf文件。

vim 打开sentinel26379.conf 文件,删除里面所有内容,拷贝下面内容(改为自己虚拟机的IP地址):

bind 0.0.0.0
daemonize yes
protected-mode no
port 26379
logfile /myredis/logs/sentinel26379.log"
pidfile /var/run/redis-sentinel26379.pid
dir /myredis
sentinel monitor mymaster 192.168.112.129 6379 2
sentinel auth-pass mymaster root

23680、23681也一样,但是只要改端口号即可(改为自己虚拟机的IP地址):


3、测试主从模式

如果不知道,主从模式怎么搭建,请前往Redis(五)

启动Master,两台slave,并查看主从关系。

Master:

启动80、81slave:

确定主从关系:

测试主从是否正常工作:


4、配置哨兵集群

在6379那台机器上启动sentinel集群。

哨兵集群已成功启动。


5、模拟故障场景

我们自己手动关闭6379服务器,模拟master挂了。

5.1、思考问题

Q1:Master主机挂了,两台从机是否正常?

A:从机数据正常。


Q2:是否从两台slave中选出新的Master?

A:会。如Q1所示,6380和6381在Master宕机后,哨兵会进行选举和故障转移,导致从机在获取数据时,出现Server closed或者broken pipe错误,但是会立马恢复了。

此时6380已经成为了new Master,6381也变成了6380的slave。


Q3:之前的Master恢复后,谁会是新的Master?双Master会不会冲突?

A:新Master当然是哨兵选举出来的(本次是6380,下次不知道是谁),不会出现双Master的场景,以前的Master重新恢复后,会变成new Master的slave。

启动6379,查看主从关系:

查看Master6380:

完美收官。


6、对比配置文件

后续又重新玩了一遍,所以新Master由6380变成了6381。

查看sentinel26379.conf文件。

老Master6379.conf:

new Master 6381.conf:

结论:文件的内容,在运行期间会被sentinel动态进行更改。

当Master宕机后,哨兵选举出new Master之后,sentinel会对oldMaster_redis.conf、slave_redis.conf、sentinel.conf文件的内容进行更改,即oldMaster_redis.conf中会多一行slaveof的配置,newMaster_redis.conf中会移除之前的配置,而三个sentinel.conf的监控目标也会随之调换。


四、哨兵模式运行流程和选举流程

(一)、主观下线

所谓主观下线(Subjectively Down, 简称 SDOWN)指的是单个Sentinel实例对服务器做出的下线判断,即单个sentinel认为某个服务下线(有可能是接收不到订阅,或者二者之间的网络不通等等原因)。主观下线就是说如果服务器在[sentinel down-after-milliseconds]给定的毫秒数之内没有回应PING命令或者返回一个错误消息, 那么这个Sentinel会主观的(单方面的)认为这个master不可以用了。

sentinel.conf文件中:

sentinel down-after-milliseconds <master-name> <milliseconds>

表示Master被当前sentinel实例认定为失效的间隔时间,这个配置其实就是进行主观下线的一个依据,Master在多长时间内一直没有给sentinel返回有效信息,则认定该Master主观下线。也就是说如果多久没联系上redis-servevr,认为这个redis-server进入到失效(SDOWN)状态。


(二)、客观下线

当一个Sentinel节点将主节点标记为 “主观下线” 后,它会通过Sentinel之间的gossip协议(流言协议)将这个信息传播给其他 Sentinel 节点。当有足够数量(quorum)的Sentinel节点都认为主节点处于 “主观下线” 状态时,这个主节点就会被标记为 “客观下线”(Objectively Down)。

quorum这个参数是进行客观下线的一个依据

意思是至少有quorum个sentinel认为这个master有故障才会对这个master进行下线以及故障转移。因为有的时候,某个sentinel节点可能因为自身网络原因导致无法连接master,而此时master并没有出现故障,所以这就需要多个sentinel都一致认为该master有问题,才可以进行下一步操作,这就保证了公平性和高可用。 

sentinel.conf文件中:


(三)、选举leader

当主节点被判断客观下线以后,各个哨兵节点会进行协商,先选举出一个领导者哨兵节点(兵王)也即被选举出的兵王进行failover(故障迁移)。

Q:领导者哨兵节点如何选举出来的?

A:监视该主节点的所有哨兵都有可能被选为领导者,选举使用的算法是Raft算法;Raft算法的基本思路是先到先得,即在一轮选举中,哨兵A向B发送成为领导者的申请,如果B没有同意过其他哨兵,则会同意A成为领导者。这里涉及到一个算法问题,不做过多阐述,有兴趣可以私底下学习。


(四)、故障转移

故障转移分为三个步骤。可以趣称为“新主登基”、“群臣俯首”、“旧主拜服”。

(一)、“新主登基”

新主登基指:某个slave节点被选为Master。

从slave节点中选出new Master的规则:优先级-->偏移量-->Run ID

1、优先级

redis.conf文件中,优先级slave-priority或者replica-priority最高的从节点(数字越小优先级越高 ),默认100。


2、偏移量

指复制偏移位置offset最大的从节点,通俗一点就是谁从原Master哪儿复制的key多,谁就当新的Master。


3、Run ID

Run ID是Redis 实例启动时生成的一个随机的 40 位十六进制字符串,全局唯一。哨兵会选择 Run ID字典序最小的从节点作为新的主节点


4、选举流程图


(二)、“群臣俯首”

群臣俯首指:当new Master选举出来后,剩余的slave节点脱离宕机的Master,重新连接的新的Master(可以从sentinel.log文件查看)。具体分为二步:

1、Sentinel leader会对选举出的new Master执行slaveof no one操作,将其提升为Master节点。

2、Sentinel leader向其它slave发送命令,让剩余的slave成为新的Master节点的slave。


(三)、“旧主拜服”

旧主拜服指:已经宕机的Master故障恢复,重启成功了,从新加入。但是身份由以前的Master变成slave。


(四)、故障转移小总结

上述的failover操作均由sentinel自己独自完成,完全无需人工干预。


五、使用注意事项

  1. 哨兵节点的数量应为多个,哨兵本身应该集群,保证高可用。
  2. 哨兵节点的数量应该是奇数。
  3. 各个哨兵节点的配置应一致。
  4. 如果哨兵节点部署在Docker等容器里面,尤其要注意端口的正确映射。
  5. 哨兵集群+主从复制,并不能保证数据零丢失。

六、总结

Redis哨兵模式通过监控、通知和自动故障转移机制,为 Redis集群提供了高可用性保障。合理配置和应用 Redis哨兵模式,可以有效地提升系统的稳定性和性能。在实际应用中,需要根据具体的业务需求和场景,灵活调整配置参数,以充分发挥 Redis 哨兵模式的优势。


ps:努力到底,让持续学习成为贯穿一生的坚守。学习笔记持续更新中。。。。

相关文章:

Redis7——基础篇(六)

前言&#xff1a;此篇文章系本人学习过程中记录下来的笔记&#xff0c;里面难免会有不少欠缺的地方&#xff0c;诚心期待大家多多给予指教。 基础篇&#xff1a; Redis&#xff08;一&#xff09;Redis&#xff08;二&#xff09;Redis&#xff08;三&#xff09;Redis&#x…...

简单工厂模式 (Simple Factory Pattern) 在Spring Boot 中的应用

简单工厂模式&#xff08;Simple Factory Pattern&#xff09;虽然不属于 GoF 23 种经典设计模式&#xff0c;但在实际开发中非常常用&#xff0c;尤其是在 Spring Boot 项目中。它提供了一种简单的方式来创建对象&#xff0c;将对象的创建逻辑集中到一个工厂类中。 一、简单工…...

Python简单使用MinerU

Python简单使用MinerU 1 简介 MinerU是国产的一款将PDF转化为机器可读格式的工具&#xff08;如markdown、json&#xff09;&#xff0c;可以很方便地抽取为任意格式。目前支持图像&#xff08;.jpg及.png&#xff09;、PDF、Word&#xff08;.doc及.docx&#xff09;、以及P…...

使用AI创建流程图和图表的 3 种简单方法

你可能已经尝试过使用 LLMs 生成图像&#xff0c;但你有没有想过用它们来创建 流程图和图表&#xff1f;这些可视化工具对于展示流程、工作流和系统架构至关重要。 通常&#xff0c;在在线工具上手动绘制图表可能会耗费大量时间。但你知道吗&#xff1f;你可以使用 LLMs 通过简…...

ImportError: cannot import name ‘FixtureDef‘ from ‘pytest‘

错误信息表明 pytest 在尝试导入 FixtureDef 时出现了问题。通常是由于 pytest 版本不兼容 或 插件版本冲突 引起的。以下是详细的排查步骤和解决方案&#xff1a; 1. 检查 pytest 版本 首先&#xff0c;确认当前安装的 pytest 版本。某些插件可能需要特定版本的 pytest 才能…...

机器学习实战(7):聚类算法——发现数据中的隐藏模式

第7集&#xff1a;聚类算法——发现数据中的隐藏模式 在机器学习中&#xff0c;聚类&#xff08;Clustering&#xff09; 是一种无监督学习方法&#xff0c;用于发现数据中的隐藏模式或分组。与分类任务不同&#xff0c;聚类不需要标签&#xff0c;而是根据数据的相似性将其划…...

z-score算法

z-score算法原理参考网址 https://blog.csdn.net/m0_59596937/article/details/128378641 具体实现代码如下&#xff1a; import numpy as npclass ZScoreOutlierDetector:def __init__(self, threshold3):"""构造函数"""self.threshold thre…...

企业级RAG开源项目分享:Quivr、MaxKB、Dify、FastGPT、RagFlow

企业级 RAG GitHub 开源项目深度分享&#xff1a;Quivr、MaxKB、Dify、FastGPT、RagFlow 及私有化 LLM 部署建议 随着生成式 AI 技术的成熟&#xff0c;检索增强生成&#xff08;RAG&#xff09;已成为企业构建智能应用的关键技术。RAG 技术能够有效地将大型语言模型&#xff…...

open webui 部署 以及解决,首屏加载缓慢,nginx反向代理访问404,WebSocket后端服务器链接失败等问题

项目地址&#xff1a;GitHub - open-webui/open-webui: User-friendly AI Interface (Supports Ollama, OpenAI API, ...) 选择了docker部署 如果 Ollama 在您的计算机上&#xff0c;请使用以下命令 docker run -d -p 3000:8080 --add-hosthost.docker.internal:host-gatewa…...

C++ 智能指针 unique_ptr shared_ptr weak_ptr小练习

智能指针是 C11 引入的一项重要特性&#xff0c;它可以帮助我们管理动态分配的内存&#xff0c;自动释放内存&#xff0c;避免内存泄漏和悬空指针的问题。智能指针有三种常用类型&#xff1a;std::unique_ptr、std::shared_ptr 和 std::weak_ptr。 为了帮助你熟悉智能指针的使…...

Netstat(Network Statistics)网络工具介绍

Netstat 工具详细介绍及常见指令应用 Netstat&#xff08;Network Statistics&#xff09;是一个常用的命令行工具&#xff0c;用于显示网络连接、路由表、接口统计信息、伪装连接等信息。它可以帮助用户监控计算机的网络状态&#xff0c;尤其在诊断网络问题时非常有用。Netst…...

内容中台架构下智能推荐系统的算法优化与分发策略

内容概要 在数字化内容生态中&#xff0c;智能推荐系统作为内容中台的核心引擎&#xff0c;承担着用户需求与内容资源精准匹配的关键任务。其算法架构的优化路径围绕动态特征建模与多模态数据融合展开&#xff0c;通过深度强化学习技术实现用户行为特征的实时捕捉与动态更新&a…...

React 高阶组件的优缺点

React 高阶组件的优缺点 优点 1. 代码复用性高 公共逻辑封装&#xff1a;当多个组件需要实现相同的功能或逻辑时&#xff0c;高阶组件可以将这些逻辑封装起来&#xff0c;避免代码重复。例如&#xff0c;多个组件都需要在挂载时进行数据获取操作&#xff0c;就可以创建一个数…...

最新版IDEA下载安装教程

一、下载IDEA 点击前往官网下载 或者去网盘下载 点击前往百度网盘下载 点击前往夸克网盘下载 进去后点击IDEA 然后点击Download 选择自己电脑对应的系统 点击下载 等待下载即可 二、安装IDEA 下载好后双击应用程序 点击下一步 选择好安装目录后点击下一步 勾选这两项后点击…...

DeepSeek最新开源动态:核心技术公布

2月21日午间&#xff0c;DeepSeek在社交平台X发文称&#xff0c;从下周开始&#xff0c;他们将开源5个代码库&#xff0c;以完全透明的方式与全球开发者社区分享他们的研究进展。并将这一计划定义为“Open Source Week”。 DeepSeek表示&#xff0c;即将开源的代码库是他们在线…...

《炒股养家心法.pdf》 kimi总结

《炒股养家心法.pdf》这篇文章详细阐述了一位超级游资炒股养家的心得与技巧&#xff0c;展示了其从40万到10亿的股市传奇。以下是文章中炒股技巧和心得的详细总结&#xff1a; 1.核心理念 市场情绪的理解&#xff1a;炒股养家强调&#xff0c;股市的本质是群体博弈&#xff0c…...

运维脚本——8.证书自动化管理

场景&#xff1a;自动化SSL/TLS证书的申请、续期和部署&#xff0c;避免证书过期导致服务中断。 示例&#xff1a;使用Shell脚本配合Lets Encrypt的Certbot工具自动续期证书。 #!/bin/bash # 自动续期Lets Encrypt证书并重启服务 certbot renew --quiet --post-hook "syst…...

RDMA ibverbs_API功能说明

设备管理 获取当前活动网卡 返回当前rdma设备列表 struct ibv_device **ibv_get_device_list(int *num_devices);//使用 struct ibv_device **dev_list ibv_get_device_list(NULL);获取网卡名 返回网卡名字字符串&#xff1a;如"mlx5_0"&#xff0c;一般通过网卡…...

第15届 蓝桥杯 C++编程青少组中/高级选拔赛 202401 真题答案及解析

第 1 题 【 单选题 】 表达式117 % 16 的结果是( )。 A:0 B:5 C:7 D:10 解析: % 是取模运算符,用于计算两个数相除后的余数。 计算 117 / 16,结果是 7,余数是 5。因此,117 % 16 = 5。答案: B 第 2 题 【 单选题 】 下列选项中,字符数组定义正确的是( …...

【R语言】绘图

一、散点图 散点图也叫X-Y图&#xff0c;它将所有的数据以点的形式展现在坐标系上&#xff0c;用来显示变量之间的相互影响程度。 ggplot2包中用来绘制散点图的函数是geom_point()&#xff0c;但在绘制前需要先用ggplot()函数指定数据集和变量。 下面用mtcars数据集做演示&a…...

Linux基本指令(三)+ 权限

文章目录 基本指令grep打包和压缩zip/unzipLinux和windows压缩包互传tar&#xff08;重要&#xff09;Linux和Linux压缩包互传 bcuname -r常用的热键关机外壳程序 知识点打包和压缩 Linux中的权限用户权限 基本指令 grep 1. grep可以过滤文本行 done用于标记循环的结束&#x…...

容器化部署tomcat

容器化部署tomcat 需求在docker容器中部署tomcat,并通过外部机器访问tomcat部署的项目 容器化部署要先装好docker容器(docker安装配置) 实现步骤&#xff1a; 拉取tomcat docker pull tomcat用于列出本地Docker主机上存储的所有镜像 docker images在root目录里面创建tomc…...

vscode软件中引入vant组件

一、vant简介 Vant 是一个轻量、可靠的移动端组件库&#xff0c;于 2017 年开源。 目前 Vant 官方提供了 Vue 2 版本、Vue 3 版本和微信小程序版本&#xff0c;并由社区团队维护 React 版本和支付宝小程序版本。 官网&#xff1a;介绍 - Vant Weapp 里面的快速上手的教程&a…...

DeepSeek vs ChatGPT:AI 领域的华山论剑,谁主沉浮?

一、引言 在当今科技飞速发展的时代&#xff0c;人工智能&#xff08;AI&#xff09;已然成为推动各领域变革的核心力量。而在人工智能的众多分支中&#xff0c;自然语言处理&#xff08;NLP&#xff09;因其与人类日常交流和信息处理的紧密联系&#xff0c;成为了最受瞩目的领…...

Ubuntu 22.04 Install deepseek

前言 deepseekAI助手。它具有聊天机器人功能&#xff0c;可以与用户进行自然语言交互&#xff0c;回答问题、提供建议和帮助解决问题。DeepSeek 的特点包括&#xff1a; 强大的语言理解能力&#xff1a;能够理解和生成自然语言&#xff0c;与用户进行流畅的对话。多领域知识&…...

如何将公钥正确添加到服务器的 authorized_keys 文件中以实现免密码 SSH 登录

1. 下载密钥文件 2. RSA 解析 将 id_ed25519 类型的私钥转换为 RSA 类型&#xff0c;要将 ED25519 私钥转换为 RSA 私钥&#xff0c;需要重新生成一个新的 RSA 密钥对。 步骤&#xff1a; 生成新的 RSA 密钥对 使用 ssh-keygen 来生成一个新的 RSA 密钥对。比如&#xff0c;执…...

深入理解设计模式之解释器模式

深入理解设计模式之解释器模式 在软件开发的复杂世界中,我们常常会遇到需要处理特定领域语言的情况。比如在开发一个计算器程序时,需要解析和计算数学表达式;在实现正则表达式功能时,要解析用户输入的正则表达式来匹配文本。这些场景都涉及到对特定语言的解释和执行,而解…...

【WebGL】attribute方式实例化绘制

背景 一般有attribute和uniform两种方式进行实例化绘制 attribute方式实例化 这里需要注意 bufferData和bufferSubData方式的用法顺序和参数 gl.bufferData(target, sizeOrData, usage); sizeOrData&#xff08;实例化配合bufferSubData 更新数据一般使用这种先&#xff09…...

线代[8]|北大丘维声教授《怎样学习线性代数?》(红色字体为博主注释)

文章目录 说明一、线性代数的内容简介二、学习线性代数的用处三、线性代数的特点四、学习线性代数的方法五、更新时间记录 说明 文章中红色字体为博主敲录完丘教授这篇文章后所加&#xff0c;刷到这篇文章的读者在首次阅读应当跳过红色字体&#xff0c;先通读一读文章全文&…...

光明谷推出AT指令版本的蓝牙音箱SOC 开启便捷智能音频开发新体验

前言 在蓝牙音箱市场竞争日益激烈的当下&#xff0c;开发一款性能卓越且易于上手的蓝牙音箱&#xff0c;成为众多厂商追求的目标。而光明谷科技有限公司推出的 AT 指令版本的蓝牙音箱 SOC&#xff0c;无疑为行业带来了全新的解决方案&#xff0c;以其诸多独特卖点&#xff0c;迅…...