分布式锁: Redis和ZooKeeper两种分布式锁对比
在分布式系统中,分布式锁是协调多节点共享资源访问的核心机制。Redis 和 ZooKeeper 是两种常用的分布式锁实现方案,但两者的设计理念、适用场景和优缺点存在显著差异。本文将从 一致性模型、性能、可靠性、实现原理 等维度进行对比,并提供技术选型建议。
一、核心设计理念对比
特性 | Redis | ZooKeeper |
---|---|---|
数据模型 | 内存数据库(Key-Value) | 分布式协调服务(树形节点) |
一致性模型 | AP(高可用性 + 分区容忍性) | CP(强一致性 + 分区容忍性) |
锁的实现机制 | 基于 SETNX + Lua 脚本 | 基于临时顺序节点(Ephemeral Sequential) |
锁释放方式 | 依赖过期时间或客户端显式释放 | 客户端断开时自动释放(临时节点特性) |
典型场景 | 高并发、允许短暂锁失效 | 强一致性、高可靠性场景 |
二、实现原理对比
1. Redis 分布式锁
核心步骤:
- 加锁:
使用SET key unique_value NX PX expire_time
原子命令,若 Key 不存在则设置值并定义过期时间。 - 解锁:
通过 Lua 脚本原子性验证unique_value
后删除 Key。 - 自动续期(如 Redisson):
后台线程(看门狗)定期检查并延长锁的过期时间。
优点:
- 高性能:基于内存操作,TPS 可达 10W+。
- 简单易用:原生支持或通过客户端库(如 Redisson)快速集成。
- 灵活性:支持多种锁类型(可重入锁、公平锁、红锁等)。
缺点:
- 弱一致性风险:
- 主从异步复制可能导致锁丢失(如主节点宕机且锁未同步到从节点)。
- RedLock 算法可缓解,但无法完全避免时钟漂移、网络分区等问题。
- 依赖过期时间:若业务执行时间超出锁过期时间,可能导致锁失效。
2. ZooKeeper 分布式锁
核心步骤:
- 创建临时顺序节点:
客户端在锁对应的 ZNode 下创建临时顺序节点(如/lock/resource_00000001
)。 - 判断最小节点:
检查当前节点是否是最小序号节点,若是则获取锁;否则监听前一个节点的删除事件。 - 释放锁:
客户端断开连接时,临时节点自动删除,触发后续节点获取锁。
优点:
- 强一致性:基于 ZAB 协议,所有操作全局有序,保证锁的互斥性。
- 自动释放:客户端崩溃或网络断开时,临时节点自动删除,避免死锁。
- 无过期时间风险:无需依赖超时机制,适合长时间任务。
缺点:
- 性能较低:写操作需集群多数节点确认,TPS 通常在 1W 以下。
- 客户端复杂性:需处理连接管理、Watch 事件重注册等问题。
- 脑裂问题:极端情况下,ZooKeeper 集群可能出现脑裂(概率极低)。
三、关键维度对比
1. 一致性保障
- Redis:
- 主从异步复制下存在锁丢失风险(即使使用 RedLock,也无法完全避免时钟问题)。
- 适合对锁的短暂失效有一定容忍度的场景(如秒杀库存扣减)。
- ZooKeeper:
- 基于 ZAB 协议保证强一致性,所有客户端看到的锁状态一致。
- 适合对锁可靠性要求极高的场景(如金融交易、分布式事务)。
2. 性能
- Redis:
- 内存操作 + 单线程模型,吞吐量高,适合高并发场景。
- ZooKeeper:
- 写操作需集群多数节点持久化,延迟较高(通常 1-10ms),不适合高频锁竞争。
3. 容错性与高可用
- Redis:
- 集群模式下通过分片和主从复制实现高可用,但主从切换可能丢锁。
- RedLock 需多个独立 Redis 实例,运维成本高。
- ZooKeeper:
- 集群基于 ZAB 协议,宕机节点数小于半数时仍可用。
- 数据持久化到磁盘,重启后状态不丢失。
4. 使用复杂度
- Redis:
- 原生命令简单,但需处理锁续期、误删等问题(Redisson 等库已封装)。
- ZooKeeper:
- 需理解临时节点、Watch 机制,客户端需处理会话超时和重连。
四、典型应用场景
1. Redis 适用场景
- 高并发读/写:如电商秒杀、优惠券发放。
- 允许锁短暂失效:结合业务幂等性补偿(如订单重复提交检测)。
- 已有 Redis 基础设施:减少运维复杂度。
示例:
// Redisson 实现秒杀锁
RLock lock = redisson.getLock("seckill:" + itemId);
if (lock.tryLock(0, 30, TimeUnit.SECONDS)) {try {// 扣减库存} finally {lock.unlock();}
}
2. ZooKeeper 适用场景
- 强一致性要求:如分布式事务协调、主节点选举。
- 长事务处理:如批量数据处理任务,避免锁超时。
- 系统关键路径:如支付系统、银行核心交易。
示例:
// Curator 实现分布式锁
InterProcessMutex lock = new InterProcessMutex(client, "/transaction/lock");
if (lock.acquire(10, TimeUnit.SECONDS)) {try {// 执行事务} finally {lock.release();}
}
五、选型建议
场景 | 推荐方案 | 理由 |
---|---|---|
高频短期锁(如秒杀) | Redis + Redisson | 高性能、低延迟,结合业务幂等性可容忍偶发锁失效。 |
低频长期锁(如主节点选举) | ZooKeeper | 强一致性、自动释放,避免锁超时风险。 |
高可靠性金融交易 | ZooKeeper | 数据一致性优先,可接受性能损耗。 |
多数据中心部署 | Redis (RedLock) | ZooKeeper 跨数据中心延迟高,Redis 分片部署更灵活。 |
已有技术栈兼容性 | 根据现状选择 | 若已使用 Redis 集群,优先 Redis;若已有 ZooKeeper(如 Kafka 集群),选 ZK。 |
六、总结
-
Redis 分布式锁:
优势在于性能和简单性,适合高并发、允许短暂不一致的场景;风险在于主从切换和时钟问题,需结合业务设计补偿机制。 -
ZooKeeper 分布式锁:
优势在于强一致性和可靠性,适合关键业务场景;代价是性能和复杂度,需权衡吞吐量需求。
最终建议:
- 若系统要求 高性能 + 最终一致性,选择 Redis(配合 Redisson)。
- 若系统要求 强一致性 + 高可靠,选择 ZooKeeper(配合 Curator)。
- 在混合场景中,可针对不同业务模块选择不同锁方案(如核心交易用 ZooKeeper,库存扣减用 Redis)。
相关文章:
分布式锁: Redis和ZooKeeper两种分布式锁对比
在分布式系统中,分布式锁是协调多节点共享资源访问的核心机制。Redis 和 ZooKeeper 是两种常用的分布式锁实现方案,但两者的设计理念、适用场景和优缺点存在显著差异。本文将从 一致性模型、性能、可靠性、实现原理 等维度进行对比,并提供技术…...

动态规划-LCR 166.珠宝的最大价值-力扣(LeetCode)
一、题目解析 frame二维矩阵中每个值代表珠宝的价值,现在从左上角开始拿珠宝,只能向右或向下拿珠宝,到达右下角时停止拿珠宝,要求拿的珠宝价值最大。 二、算法解析 1.状态表示 我们想要知道的是到达[i,j]为位置时的最大价值&am…...

JDBC实现模糊、动态与分页查询的详解
文章目录 一. 模糊查询1. Mysql的写法2. JDBC的实现 二. 动态条件查询1. 创建生成动态条件查询sql的方法2. 完整的动态条件查询类以及测试类 三. 分页查询1. 什么是分页查询?2. 分页查询的分类3. MySQL的实现4. JDBC实现4.1. 创建page页4.2. 分页的实现 本章来讲一下…...

域环境信息收集技术详解:从基础命令到实战应用
引言 在企业网络环境中,Active Directory (AD)域服务是微软提供的集中式目录服务,用于管理网络中的用户、计算机和其他资源。对于信息安全专业人员来说,熟练掌握域环境信息收集技术至关重要,无论是进行渗透测试、安全评估还是日常…...
nodejs特性解读
单线程和事件驱动架构 参考 程序员dd-事件驱动架构 it-老齐-事件驱动架构 总结...

【C++ Qt】布局管理器
每日激励:“不设限和自我肯定的心态:I can do all things。 — Stephen Curry” 🤔绪论: 在Qt开发中,界面布局的合理设计是提升用户体验的关键。早期,开发者常采用绝对定位的方式摆放控件,即通…...

vscode用python开发maya联动调试设置
如何在VScode里编写Maya Python脚本_哔哩哔哩_bilibili1 包括1,maya的python全面在vscode支持,2,通过mayacode发送到maya,3同步调试 import maya.cmds as cmds 1、让 maya.cmds编译通过 下载Autodesk_Maya_2018_6_Update_DEVK…...

SLAM定位常用地图对比示例
序号 地图类型 概述 1 格栅地图 将现实环境栅格化,每一个栅格用 0 和 1 分别表示空闲和占据状态,初始化为未知状态 0.5 2 特征地图 以点、线、面等几何特征来描绘周围环境,将采集的信息进行筛选和提取得到关键几何特征 3 拓扑地图 将重要部分抽象为地图,使用简单的图形表示…...
Ubnutu ADB 无法识别设备的解决方法
1. 正确安装adb 下载地址 2. 检查 Linux 是否识别设备 lsusb通过上述指令,分别查询插入、断开设备的usb设备表,如下所示: # 插入设备 adbc:~$ lsusb Bus 002 Device 001: ID 1d6b:0003 Linux Foundation 3.0 root hub Bus 001 Device 011:…...
前端-HTML元素
目录 HTML标签是什么? 什么是HTML元素? HTML元素有哪些分类方法? 什么是HTML头部元素 更换路径 注:本文以leetbook为基础 HTML标签是什么? HTML标签是HTML语言中最基本单位和重要组成部分 虽然它不区分大小写&a…...
dagster的etl实现
本文展示了如何使用Dagster框架实现一个动态ETL(Extract, Transform, Load)流程。通过定义多个操作(op),包括生成动态任务、处理单个任务、收集结果和汇总结果,构建了一个动态任务处理流程。generate_tasks…...

python的漫画网站管理系统
目录 技术栈介绍具体实现截图系统设计研究方法:设计步骤设计流程核…...

源码安装gperftools工具
源码安装gperftools工具 下载gperftools源码 https://github.com/gperftools/gperftools/releases/download/gperftools-2.16/gperftools-2.16.tar.gz 注:需要下载github上release版本,如果直接下载master分支上源码,将可能出现各种编译报错…...
QMK 宏(Macros)功能详解(实战部分)
QMK 宏(Macros)功能详解(实战部分) 一、宏的基本概念与作用 宏(Macros)是 QMK 固件中一项强大的功能,它允许您在按下单个按键时执行多个按键操作。通过宏,您可以: 输入常用短语或文本执行复杂的按键组合自动化重复性操作触发系统功能或快捷键🔔 安全提示:虽然可以…...

前端脚手架开发指南:提高开发效率的核心操作
前端脚手架通过自动化的方式可以提高开发效率并减少重复工作,而最强大的脚手架并不是现成的那些工具而是属于你自己团队量身定制的脚手架!本篇文章将带你了解脚手架开发的基本技巧,帮助你掌握如何构建适合自己需求的工具,并带着你…...

搜索引擎工作原理|倒排索引|query改写|CTR点击率预估|爬虫
写在前面 使用搜索引擎是我们经常做的事情,搜索引擎的实现原理。 什么是搜索引擎 搜索引擎是一种在线搜索工具,当用户在搜索框输入关键词时,搜索引擎就会将与该关键词相关的内容展示给用户。比较大型的搜索引擎有谷歌,百度&…...

Python实例题:Python自动工资条
目录 Python实例题 题目 python-automatic-payroll-slipPython 自动生成工资条脚本 代码解释 加载文件: 获取表头: 写入表头: 生成工资条: 保存文件: 运行思路 注意事项 Python实例题 题目 Python自动工资…...

Function Calling万字实战指南:打造高智能数据分析Agent平台
个人主页:Guiat 归属专栏:科学技术变革创新 文章目录 1. Function Calling:智能交互的新范式1.1 Function Calling 技术概述1.2 核心优势分析 2. 数据分析Agent平台架构设计2.1 系统架构概览2.2 核心组件解析2.2.1 函数注册中心2.2.2 Agent控…...
spark MySQL数据库配置
Spark 连接 MySQL 数据库的配置 要让 Spark 与 MySQL 数据库实现连接,需要进行以下配置步骤。下面为你提供详细的操作指南和示例代码: 1. 添加 MySQL JDBC 驱动依赖 你得把 MySQL 的 JDBC 驱动添加到 Spark 的类路径中。可以通过以下两种方式来完成&a…...
python四则运算计算器
python四则运算计算器 是谁说,python不好写计算器的,我亲自写个无ui的计算器功能,证明这是谣言 step1:C:\Users\wangrusheng\Downloads\num.txt 15 - 4 * 3 10 / 2(5 3) * 2 6 / 31/2 * 8 3/4 * 4 - 0.52.5 * (4 1.6) - 9 / 3-6 12 * (…...

线对板连接器的兼容性问题:为何老旧设计难以满足现代需求?
线对板连接器作为电子设备的核心纽带,正面临前所未有的兼容性挑战。某智能工厂升级生产线时发现,沿用十年的2.54毫米间距连接器,在接入新型工业相机时出现30%的信号丢包率,而切换至0.4毫米超密间距连接器后,数据传输速…...

AI517 AI本地部署 docker微调(失败)
本地部署AI 计划使用OLLAMA进行本地部署 修改DNS 访问github 刷新缓存 配置环境变量 OLLAMA安装成功 部署成功 计划使用docker进行微调 下载安装docker 虚拟化已开启 开启上面这些 准备下载ubuntu docker ragflow dify 用git去泡...

VR和眼动控制集群机器人的方法
西安建筑科技大学信息与控制工程学院雷小康老师团队联合西北工业大学航海学院彭星光老师团队,基于虚拟现实(VR)和眼动追踪技术实现了人-集群机器人高效、灵活的交互控制。相关研究论文“基于虚拟现实和眼动的人-集群机器人交互方法” 发表于信…...
python训练营打卡第26天
函数专题1:函数定义与参数 知识点回顾: 函数的定义变量作用域:局部变量和全局变量函数的参数类型:位置参数、默认参数、不定参数传递参数的手段:关键词参数传递参数的顺序:同时出现三种参数类型时 作业&…...

TiDB 中新 Hash Join 的设计与性能优化
原文来源: https://tidb.net/blog/11667c37 本文作者:徐飞 导读 在数据库管理系统(DBMS)中,连接操作(Join)是查询处理的核心环节之一,其性能直接影响到整个系统的响应速度和效率…...

1.共享内存(python共享内存实际案例,传输opencv frame)
主进程程序 send.py import cv2 import numpy as np from multiprocessing import shared_memory, resource_trackercap cv2.VideoCapture(0) if not cap.isOpened():print("无法打开 RTSP 流,请检查地址、网络连接或 GStreamer 配置。") else:# 创建共…...

网页常见水印实现方式
文章目录 1 明水印技术实现1.1 DOM覆盖方案1.2 Canvas动态渲染1.3 CSS伪元素方案2 暗水印技术解析2.1 空域LSB算法2.2 频域傅里叶变换3 防篡改机制设计3.1 MutationObserver防护3.2 Canvas指纹追踪4 前后端实现对比5 攻防博弈深度分析5.1 常见破解手段5.2 进阶防御策略6 选型近…...
oracle主备切换参考
主备正常切换操作参考:RAC两节点->单机 (rac和单机的操作区别:就是关闭其它节点,剩一个节点操作即可) 1.主库准备 检查状态 SQL> select inst_id,database_role,OPEN_MODE from gv$database; INST_ID DATA…...
Java大师成长计划之第25天:Spring生态与微服务架构之容错与断路器模式
📢 友情提示: 本文由银河易创AI(https://ai.eaigx.com)平台gpt-4-turbo模型辅助创作完成,旨在提供灵感参考与技术分享,文中关键数据、代码与结论建议通过官方渠道验证。 在微服务架构中,系统通常…...

【ARM】MDK如何将变量存储到指定内存地址
1、 文档目标 在嵌入式系统开发中,通过MDK(Microcontroller Development Kit)进行工程配置,将指定的变量存储到指定的内存地址上是一项非常重要的技术。这项操作不仅能够满足特定硬件架构的需求,还能优化系统的性能和…...