Redis如何解决热Key问题
目录
- **如何解决 Redis 的热 Key(Hot Key)问题?**
- **解决方案**
- **1. 使用多级缓存**
- **方案**
- **2. 进行 Key 预分片(Key Sharding)**
- **方案**
- **3. 使用 Redis 复制机制(主从复制或集群)**
- **方案**
- **4. 采用批量 Key 轮换(Consistent Hash)**
- **方案**
- **5. 采用异步更新策略**
- **方案**
- **6. 限流和降级**
- **方案**
- **7. 结合 MQ 做异步削峰**
- **方案**
- **总结**
- **面试标准回答**
如何解决 Redis 的热 Key(Hot Key)问题?
热 Key(Hot Key)是指访问频率极高的键,在高并发场景下可能会造成:
- 单个 Redis 节点压力过大(大量请求命中一个 Key)。
- CPU 过载,响应变慢(甚至影响整个 Redis 集群)。
- 缓存失效后大量请求直接打到数据库,导致数据库崩溃(缓存击穿)。
解决方案
针对不同场景,解决方案主要包括 “分散请求” 和 “降低 Redis 负载” 两个方向。
1. 使用多级缓存
核心思路:在 Redis 之前增加一级缓存,减少 Redis 访问压力。
方案
-
本地缓存(L1 Cache)
- 在应用服务器上存储热点数据(如 Guava Cache, Caffeine)。
- 优点:访问速度更快,避免 Redis 过载。
- 缺点:如果多个应用服务器同时缓存相同 Key,可能会有数据一致性问题。
-
CDN 缓存(L0 Cache)
- 适用于静态资源或热点数据(如商品详情页)。
- 优点:减少数据库、Redis 访问压力。
示例:使用 Guava 本地缓存
LoadingCache<String, String> localCache = CacheBuilder.newBuilder().maximumSize(1000).expireAfterWrite(10, TimeUnit.MINUTES).build(new CacheLoader<String, String>() {public String load(String key) throws Exception {return redis.get(key); // 从 Redis 取数据}});// 读取缓存
String value = localCache.get("hot_key");
2. 进行 Key 预分片(Key Sharding)
核心思路:将单个热 Key 拆分成多个 Key,让不同的 Redis 节点存储不同的副本,从而分散压力。
方案
- 存储时:写入多个不同的 Key,例如
hot_key_1, hot_key_2, hot_key_3。 - 查询时:随机访问
hot_key_n,或使用一致性 Hash 计算 Key。
示例
// 写入时分片
for (int i = 0; i < 3; i++) {redis.set("hot_key_" + i, value);
}// 读取时随机选一个
String key = "hot_key_" + (rand() % 3);
String value = redis.get(key);
适用场景
- 高并发计数(如热点直播间点赞)。
- 高 QPS 的热点数据(如秒杀商品库存)。
3. 使用 Redis 复制机制(主从复制或集群)
核心思路:通过 Redis 读写分离,多个节点分担读取压力。
方案
- 主节点(Master)处理写请求,多个从节点(Slave)处理读请求。
- 结合 客户端负载均衡,将
get请求分发到不同的从节点。
示例(配置 Redis 读从库)
slaveof master_ip master_port
适用场景
- 适用于 Redis 集群模式,大规模热 Key 分布式缓存场景。
4. 采用批量 Key 轮换(Consistent Hash)
核心思路:通过一致性哈希(Consistent Hashing)降低热 Key 访问压力。
方案
- 将一个 Key 拆分成多个时间窗口 Key。
- 访问时随机选择一个 Key,确保热点数据均匀分布。
- 定期清理过时的 Key。
示例
String key = "hot_key:" + (time(nullptr) % 5); // 轮换 Key
redis.set(key, value);
适用场景
- 防止缓存击穿(热点数据定期轮换)。
- 适用于短周期热点数据(如秒杀、短时间访问高峰)。
5. 采用异步更新策略
核心思路:缓存失效后,先返回旧值,同时异步更新缓存,避免大量请求瞬间打到数据库。
方案
- 采用 双缓存(Double Cache) 机制:
- 用户查询时返回旧缓存。
- 后台异步更新新数据。
示例
String value = redis.get("hot_key");
if (value == null) {value = localCache.get("hot_key"); // 先从本地缓存读取asyncUpdateRedis(); // 后台线程更新 Redis
}
return value;
适用场景
- 避免缓存击穿问题(如商品价格、秒杀库存)。
6. 限流和降级
核心思路:如果 Redis 无法支撑高并发请求,可以限制请求频率,或者直接返回默认值。
方案
-
限流(使用令牌桶 / 滑动窗口)
- 限制相同 Key 的访问频率。
- 避免短时间内 Redis 负载过高。
-
降级(请求超时时返回默认值)
- 如果 Redis 繁忙,则返回本地默认值,减少 Redis 压力。
示例(限流)
local key = KEYS[1]
local limit = tonumber(ARGV[1])
local current = redis.call('incr', key)if current == 1 thenredis.call('expire', key, 60) -- 60s 过期
endif current > limit thenreturn 0 -- 限流失败
end
return 1
适用场景
- API 访问频率控制(如抢购、直播点赞)。
7. 结合 MQ 做异步削峰
核心思路:将高并发请求写入消息队列(如 Kafka / RabbitMQ),异步处理,降低 Redis 访问压力。
方案
- 将请求写入 Kafka,批量处理。
- 后端定期刷新缓存,避免 Redis 承担高并发压力。
示例
// 生产者:将查询请求写入 MQ
kafkaProducer.send("hotKeyTopic", "hot_key");// 消费者:异步更新缓存
kafkaConsumer.onMessage(msg -> {String value = queryDatabase("hot_key");redis.set("hot_key", value);
});
适用场景
- 适用于秒杀、短时热点数据(如抢购、热点新闻)。
总结
| 方法 | 核心思路 | 适用场景 |
|---|---|---|
| 多级缓存 | L1(本地缓存)+ L2(Redis 缓存) | 低延迟读取,热点数据 |
| Key 预分片 | 拆分热 Key,分散访问压力 | 高并发计数(直播点赞、热点商品) |
| 主从复制 | 读写分离,提高读性能 | Redis 集群,读多写少 |
| 轮换 Key | 使用 Hash 轮转 Key | 秒杀库存、短时间热点数据 |
| 异步更新 | 先返回旧缓存,后台更新 | 价格、秒杀商品库存 |
| 限流和降级 | 限制访问频率,防止 Redis 过载 | 高 QPS 接口,秒杀抢购 |
| MQ 削峰 | 通过 Kafka / RabbitMQ 处理请求 | 高并发订单、热点数据 |
面试标准回答
解决 Redis 热 Key 主要有 3 类方法:
- 减少 Redis 访问压力(本地缓存、CDN、读写分离)。
- 分散 Key 访问(Key 预分片、轮换 Key)。
- 限制并发(限流、降级、MQ 削峰)。
最推荐的方案是:本地缓存 + Key 预分片 + Redis 读写分离,结合业务需求选择最优方案!🚀
相关文章:
Redis如何解决热Key问题
目录 **如何解决 Redis 的热 Key(Hot Key)问题?****解决方案** **1. 使用多级缓存****方案** **2. 进行 Key 预分片(Key Sharding)****方案** **3. 使用 Redis 复制机制(主从复制或集群)****方案…...
从开发到部署:EasyRTC嵌入式视频通话SDK如何简化实时音视频通信的集成与应用
嵌入式设备和视频综合管理平台均支持B/S架构。在B/S架构下,传统的视频观看方式依赖于微软的OCX控件,然而OCX控件的使用正面临越来越多的挑战: 首先,用户需要安装浏览器插件、调整浏览器安全级别,并允许ActiveX控件弹出…...
Zookeeper(58)如何在Zookeeper中实现分布式锁?
在 Zookeeper 中实现分布式锁是一种常见的用例。Zookeeper 提供了强一致性、高可用性的分布式协调服务,使得它非常适合用来实现分布式锁。以下是详细的步骤和代码示例,展示如何在 Zookeeper 中实现分布式锁。 1. Zookeeper 分布式锁的基本原理 Zookeep…...
Mac端homebrew安装配置
拷打了一下午o3-mini-high,不如这位博主的超强帖子,10分钟结束战斗 跟随该文章即可,2025/2/19亲测可行 mac 安装HomeBrew(100%成功)_mac安装homebrew-CSDN博客文章浏览阅读10w次,点赞258次,收藏837次。一直觉得自己写…...
Spring 接入 DeepSeek
引入依赖 <dependency><groupId>org.springframework.ai</groupId><artifactId>spring-ai-openai-spring-boot-starter</artifactId> </dependency>2.yml配置 spring:ai:openai:api-key: sk-xxxxx // 填写自己申请的keybase-url: http…...
vscode将文件中行尾默认CRLF改为LF
安装prettier npm install --save-dev --save-exact prettier执行命令 npx prettier --write --end-of-line lf .即可将项目中的所有文件行尾序列格式改为lf *在你使用git拉取代码的时候,git会自动将代码当中与你当前系统不同的换行方式转化成你当前系统的换行方…...
python-leetcode 33.排序链表
题目: 给定链表的头结点head,请将其按升序排列,并返回排序后的链表 方法一:自顶向下归并排序 链表自顶向下归并排序的过程: 1.找到链表的中点,以中点为分界,将链表拆分成两个子链表。寻找链表的中点可以…...
【数据结构初阶第十二节】设计循环队列
云边有个稻草人-CSDN博客 必须有为成功付出代价的决心,然后想办法付出这个代价。 还有最后一道关于队列的习题,这题有点难,准备好迎接挑战吧! 目录 1.【题目】 2.实现循环队列推荐用数组,Why? 3.Q1:如…...
基于微信小程序的民宿短租系统设计与实现(ssm论文源码调试讲解)
第4章 系统设计 4.1系统设计的目标 系统设计的目标是满足用户的需求和满足系统实现所需要的所有要求。本系统收集了信息浏览、信息删除、信息添加、信息修改、信息查询为一体[17]。改变了用户民宿短租的方式,提高管理员管理效率以及用户预订的效率。为用户、房主提…...
使用 Jetty 构建 HTTPS 服务入门指南
在互联网安全越来越重要的今天,使用 HTTPS 为 Web 服务提供安全传输成为标准配置。Jetty 是一个高性能、易用且功能丰富的开源 Java HTTP 服务器和 Servlet 容器,能够轻松实现 HTTPS 支持。本文将结合代码实例,引导您快速搭建一个基于 Jetty 的 HTTPS 服务。 一、Jetty 简介…...
数据结构《图》
数据结构《图论》 图的性质 一、无向图(Undirected Graph) 定义 由一组顶点(Vertex)和一组无向边(Edge)构成。 每条无向边用一条无方向的线段连接两个顶点,记为 ( (u, v) ),其中…...
用Chrome Recorder轻松完成自动化测试脚本录制
前言 入门自动化测试,录制回放通常是小白测试首先用到的功能。而录制回放工具也一直是各大Web自动化测试必然会着重提供的一块功能。 早期WinRunner、QTP这样的工具,自动化测试可以说是围绕录制回放开展的。近年像Selenium也提供有录制工具 Selenium IDE,Playwright也包含…...
⭐️苹果电脑安装windows10双系统【详细图文步骤保姆级教程】【本教材适用于MAC台式机、笔记本MacBook air和pro】
苹果电脑安装windows10双系统【详细图文步骤保姆级教程】【本教材适用于MAC台式机、笔记本MacBook air和pro】 苹果电脑安装windows10双系统一、准备工作准备项1:U盘作为系统安装盘准备项2:您需要安装的系统镜像 二、启动转换助理步骤1:找到启…...
win10系统上的虚拟机安装麒麟V10系统提示找不到操作系统
目录预览 一、问题描述二、原因分析三、解决方案四、参考链接 一、问题描述 win10系统上的虚拟机安装麒麟V10系统提示找不到操作系统,报错:Operating System not found 二、原因分析 国产系统,需要注意的点: 需要看你的系统类…...
Java 大视界 -- 开源社区对 Java 大数据发展的推动与贡献(91)
💖亲爱的朋友们,热烈欢迎来到 青云交的博客!能与诸位在此相逢,我倍感荣幸。在这飞速更迭的时代,我们都渴望一方心灵净土,而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识,也…...
深入浅出C语言内存模型——高阶篇
在C语言编程的征途上,内存管理无疑是最具挑战性的部分之一。今天,我们将深入探讨C语言的内存模型,剖析其高级特性,并通过一系列案例,助你成为内存管理的佼佼者。本文为高阶篇,适合已经有一定C语言基础的读者…...
AI 百炼成神:逻辑回归, 垃圾邮件分类
第二个项目:逻辑回归垃圾邮件分类 项目代码下载地址:https://download.csdn.net/download/m0_56366541/90398247 项目目标 学习逻辑回归的基本概念。使用逻辑回归算法来实现垃圾邮件的分类。理解如何处理文本数据以及如何评估分类模型的性能。项目步骤 准备数据集 我们将使…...
MybatisPlus-扩展功能
逻辑删除乐观锁 MyBatisPlus从入门到精通-3(含mp代码生成器) Db静态工具类 Spring依赖循环问题 代码生成器 MybatisPlus代码生成器 枚举处理器 我们这里用int来存储状态 需要注解,很不灵活 希望用枚举类来代替这个Integer 这样的话我…...
《计算机视觉》——角点检测和特征提取sift
角点检测 角点的定义: 从直观上理解,角点是图像中两条或多条边缘的交点,在图像中表现为局部区域内的灰度变化较为剧烈的点。在数学和计算机视觉中,角点可以被定义为在两个或多个方向上具有显著变化的点。比如在一幅建筑物的图像…...
DeepSeek模型快速部署教程-搭建自己的DeepSeek
前言:在人工智能技术飞速发展的今天,深度学习模型已成为推动各行各业智能化转型的核心驱动力。DeepSeek 作为一款领先的 AI 模型,凭借其高效的性能和灵活的部署方式,受到了广泛关注。无论是自然语言处理、图像识别,还是…...
【杂谈】-递归进化:人工智能的自我改进与监管挑战
递归进化:人工智能的自我改进与监管挑战 文章目录 递归进化:人工智能的自我改进与监管挑战1、自我改进型人工智能的崛起2、人工智能如何挑战人类监管?3、确保人工智能受控的策略4、人类在人工智能发展中的角色5、平衡自主性与控制力6、总结与…...
springboot 百货中心供应链管理系统小程序
一、前言 随着我国经济迅速发展,人们对手机的需求越来越大,各种手机软件也都在被广泛应用,但是对于手机进行数据信息管理,对于手机的各种软件也是备受用户的喜爱,百货中心供应链管理系统被用户普遍使用,为方…...
Cilium动手实验室: 精通之旅---20.Isovalent Enterprise for Cilium: Zero Trust Visibility
Cilium动手实验室: 精通之旅---20.Isovalent Enterprise for Cilium: Zero Trust Visibility 1. 实验室环境1.1 实验室环境1.2 小测试 2. The Endor System2.1 部署应用2.2 检查现有策略 3. Cilium 策略实体3.1 创建 allow-all 网络策略3.2 在 Hubble CLI 中验证网络策略源3.3 …...
解决本地部署 SmolVLM2 大语言模型运行 flash-attn 报错
出现的问题 安装 flash-attn 会一直卡在 build 那一步或者运行报错 解决办法 是因为你安装的 flash-attn 版本没有对应上,所以报错,到 https://github.com/Dao-AILab/flash-attention/releases 下载对应版本,cu、torch、cp 的版本一定要对…...
鸿蒙中用HarmonyOS SDK应用服务 HarmonyOS5开发一个生活电费的缴纳和查询小程序
一、项目初始化与配置 1. 创建项目 ohpm init harmony/utility-payment-app 2. 配置权限 // module.json5 {"requestPermissions": [{"name": "ohos.permission.INTERNET"},{"name": "ohos.permission.GET_NETWORK_INFO"…...
dify打造数据可视化图表
一、概述 在日常工作和学习中,我们经常需要和数据打交道。无论是分析报告、项目展示,还是简单的数据洞察,一个清晰直观的图表,往往能胜过千言万语。 一款能让数据可视化变得超级简单的 MCP Server,由蚂蚁集团 AntV 团队…...
Web 架构之 CDN 加速原理与落地实践
文章目录 一、思维导图二、正文内容(一)CDN 基础概念1. 定义2. 组成部分 (二)CDN 加速原理1. 请求路由2. 内容缓存3. 内容更新 (三)CDN 落地实践1. 选择 CDN 服务商2. 配置 CDN3. 集成到 Web 架构 …...
AI+无人机如何守护濒危物种?YOLOv8实现95%精准识别
【导读】 野生动物监测在理解和保护生态系统中发挥着至关重要的作用。然而,传统的野生动物观察方法往往耗时耗力、成本高昂且范围有限。无人机的出现为野生动物监测提供了有前景的替代方案,能够实现大范围覆盖并远程采集数据。尽管具备这些优势…...
快刀集(1): 一刀斩断视频片头广告
一刀流:用一个简单脚本,秒杀视频片头广告,还你清爽观影体验。 1. 引子 作为一个爱生活、爱学习、爱收藏高清资源的老码农,平时写代码之余看看电影、补补片,是再正常不过的事。 电影嘛,要沉浸,…...
快速排序算法改进:随机快排-荷兰国旗划分详解
随机快速排序-荷兰国旗划分算法详解 一、基础知识回顾1.1 快速排序简介1.2 荷兰国旗问题 二、随机快排 - 荷兰国旗划分原理2.1 随机化枢轴选择2.2 荷兰国旗划分过程2.3 结合随机快排与荷兰国旗划分 三、代码实现3.1 Python实现3.2 Java实现3.3 C实现 四、性能分析4.1 时间复杂度…...
