Redis生产问题(缓存穿透、击穿、雪崩)——针对实习面试
目录
- Redis生产问题
- 什么是缓存穿透?
- 如何解决缓存穿透?
- 什么是缓存击穿?
- 如何解决缓存击穿?
- 缓存穿透和缓存击穿有什么区别?
- 什么是缓存雪崩?
- 如何解决缓存雪崩?
Redis生产问题

什么是缓存穿透?
缓存穿透是指当请求查询数据库中不存在的数据时,由于在缓存中也没有该数据,导致每次请求都要到数据库查询,这可能会对数据库造成巨大压力,甚至导致数据库崩溃。
这种情况通常发生在以下场景:
- 恶意攻击:攻击者故意请求数据库中不存在的数据,导致数据库压力增大。
- 数据误删除:当数据库中的数据被删除后,缓存中相应的数据没有被删除,导致后续请求无法命中缓存,直接访问数据库。
- 数据更新:当数据库中的数据更新后,缓存中的数据没有及时更新,导致后续请求无法命中缓存,直接访问数据库。
如何解决缓存穿透?
在面试中,当被问到如何解决缓存穿透问题时,你可以从以下几个方面来回答:
- 缓存空对象
-
策略:当数据库中不存在请求的数据时,将空结果缓存起来,并设置一个较短的过期时间。这样,下次相同的请求就会直接命中缓存,避免了对数据库的查询。
-
实现:在代码中,你可以检查查询结果是否为null,如果是,则将null值缓存,并设置一个较短的TTL(Time To Live)。
- 布隆过滤器
-
策略:使用布隆过滤器来预先判断请求的数据是否可能存在于数据库中。如果布隆过滤器判断数据不存在,则直接返回,不查询数据库。
-
实现:布隆过滤器是一种空间效率很高的概率型数据结构,它可以告诉你一个元素是否可能存在于集合中。如果布隆过滤器说元素不存在,那么这个元素一定不存在;如果它说元素存在,那么这个元素可能存在也可能不存在。
- 限制请求
-
策略:对于某些特定的请求,比如请求频率过高的用户或IP,可以限制其访问频率,防止恶意攻击。
-
实现:可以使用限流算法(如令牌桶或漏桶算法)来限制请求频率,或者使用防火墙规则来限制特定IP的请求。
- 数据校验
-
策略:在查询数据库之前,对请求的数据进行校验,确保请求的数据是合法的,避免请求不存在的数据。
-
实现:在应用层添加逻辑来校验请求参数,确保它们符合预期的格式和范围。
什么是缓存击穿?
缓存击穿是指在缓存中某个热点数据在过期或被删除后,突然失效,导致大量请求同时到达数据库,这种我们称为缓存击穿。
缓存击穿的原因是一个备受欢迎的缓存数据突然失效或宕机,导致重建缓存时,由于是热点Key,所以有不断的线程来查和重建缓存,导致大量数据请求直接到达数据库。
如何解决缓存击穿?
在解决缓存击穿问题时,可以采用以下几种策略:
-
设置热点数据永不过期:
对于一些极端热点数据,可以将其缓存设置为永不过期,或者设置一个非常长的过期时间。这样可以避免因为缓存过期导致的缓存击穿问题。(不建议使用) -
使用互斥锁:
当缓存失效时,使用互斥锁来保证只有一个线程去查询数据库并更新缓存,其他线程等待。例如在Java中,可以使用ReentrantLock来实现互斥锁。 -
提前缓存预热:
在系统上线前,提前将热点数据加载到缓存中,避免大量请求同时触发缓存未命中的情况。(建议使用) -
布隆过滤器:
使用布隆过滤器预先判断请求的数据是否可能存在于数据库中。如果布隆过滤器判断数据不存在,则直接返回,不查询数据库。
缓存穿透和缓存击穿有什么区别?
缓存穿透和缓存击穿是缓存系统中两种不同的问题,它们的主要区别在于:
-
缓存穿透:
- 原因:请求查询的数据在数据库中不存在,导致缓存中也没有该数据。
- 影响:大量请求直接打到数据库,增加数据库压力。
- 解决方法:缓存空对象、使用布隆过滤器、数据校验等。
-
缓存击穿:
- 原因:缓存中某个热点数据在过期或被删除后,突然失效。
- 影响:大量请求同时到达数据库,可能导致数据库压力过大。
- 解决方法:设置热点数据永不过期、使用互斥锁、逻辑过期等。
简而言之,缓存穿透是因为请求的数据根本不存在,而缓存击穿是因为请求的数据在缓存中突然失效。
两者都可能导致数据库压力增大,但原因和解决策略有所不同。
什么是缓存雪崩?
缓存雪崩是指在Redis缓存中,大量的Key在同一时间过期,导致大量的请求同时到达数据库,造成数据库压力过大甚至宕机的情况。
缓存雪崩通常发生在以下场景:
-
大量Key同时过期:在Redis中设置了大量的Key,并且这些Key的过期时间相同或接近,当这些Key同时过期时,会导致大量的请求同时到达数据库。
-
缓存服务宕机:Redis服务突然宕机,导致缓存服务不可用,所有的请求都会直接打到数据库上。
-
缓存数据全为热点数据:如果缓存中存储的都是热点数据,当缓存服务出现问题时,所有的请求都会直接打到数据库上。
如何解决缓存雪崩?
-
分散过期时间:
- 设置不同的过期时间:对于缓存的数据,设置不同的过期时间,避免大量Key同时过期。
- 使用随机数:在设置过期时间时,给每个Key的过期时间添加一个随机数,使得它们不会同时过期。
-
持久化存储:
- 使用Redis的持久化功能(如RDB和AOF),确保在Redis重启后能够从磁盘恢复数据,减少因缓存服务宕机导致的数据库压力。
-
高可用缓存集群:
- 部署Redis集群,通过主从复制和分片来提供高可用性和扩展性,确保缓存服务不会因为单个节点的故障而完全不可用。
-
限流和降级:
- 限流:使用限流算法(如令牌桶或漏桶)来控制请求的流入速率,避免过多请求同时到达数据库。
- 降级:在缓存服务不可用时,提供降级服务,如返回一些静态数据或缓存中已有的旧数据,以保证系统的基本可用性。
-
备用缓存方案:
- 使用本地缓存或其他缓存服务作为备用缓存方案,当主缓存服务不可用时,可以切换到备用缓存。
-
预加载缓存:
- 在系统低峰时段,预加载可能即将过期的缓存数据,确保缓存中的数据始终可用。
相关文章:
Redis生产问题(缓存穿透、击穿、雪崩)——针对实习面试
目录 Redis生产问题什么是缓存穿透?如何解决缓存穿透?什么是缓存击穿?如何解决缓存击穿?缓存穿透和缓存击穿有什么区别?什么是缓存雪崩?如何解决缓存雪崩? Redis生产问题 什么是缓存穿透&#x…...
android openGL中模板测试、深度测试功能的先后顺序
目录 一、顺序 二、模板测试 1、概念 2、工作原理 3、关键函数 三、深度测试 1、概念 2、工作原理 3、关键函数 三、模板测试和深度测试的先后顺序 一、顺序 在Android OpenGL中,模板测试(Stencil Testing)是在深度测试࿰…...
CCF PTA 编程培训师资认证2021年7月真题- C++兑换礼品
【题目描述】 小零和小壹是两个爱玩游戏的小孩,他俩平时最擅长的是解谜游戏,可今天 遇到了一个有点难的算法问题,希望能得到你的帮助。 他们面对的是一个电子装置,正面有 n 个排成一列的按钮,按钮上贴着编号 1~n 号的…...
火山引擎云服务docker 安装
安装 Docker 登录云服务器。 执行以下命令,添加 yum 源。 yum update -y yum install epel-release -y yum clean all yum list依次执行以下命令,添加Docker CE镜像源。更多操作请参考Docker CE镜像。 # 安装必要的一些系统工具 sudo yum install -y yu…...
【taro react】 ---- 常用自定义 React Hooks 的实现【六】之类渐入动画效果的轮播
1. 效果 2. 场景 css 效果实现:可以看到效果图中就是一个图片从小到大的切换动画效果,这个效果很简单,使用 css 的 transform 的 scale 来实现图片的从小到大的效果,切换就更加简单了,不管是 opacity 还是 visibility 都可以实现图片的隐藏和显示的切换。React.Children.m…...
基础算法练习--滑动窗口(已完结)
算法介绍 滑动窗口算法来自tcp协议的一种特性,它的高效使得其也变成了算法题的一种重要考点.滑动窗口的实现实际上也是通过两个指针前后遍历集合实现,但是因为它有固定的解题格式,我将其单独做成一个篇章. 滑动窗口的解题格式: 首先,定义两个指针left和right,与双指针不同的…...
深度学习经典模型之ZFNet
1 ZFNet 1.1 模型介绍 ZFNet是由 M a t t h e w Matthew Matthew D . Z e i l e r D. Zeiler D.Zeiler和 R o b Rob Rob F e r g u s Fergus Fergus在AlexNet基础上提出的大型卷积网络,在2013年ILSVRC图像分类竞赛中以11.19%的错误率获得冠军(实际…...
Linux系统-ubuntu系统安装
作者介绍:简历上没有一个精通的运维工程师。希望大家多多关注作者,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 这是Linux进阶部分的最后一大章。讲完这一章以后,我们Linux进阶部分讲完以后,我们的Linux操作部分就…...
2-Ubuntu/Windows系统启动盘制作
学习目标: 掌握使用Win32DiskImager、Rufus等工具制作系统启动盘的基本步骤。独立将ISO镜像文件写入USB闪存驱动器,确保在需要时顺利安装或修复系统。通过学习如何选择正确的源文件和目标驱动器,理解启动盘的使用场景和注意事项,…...
你使用过哪些MySQL中复杂且使用不频繁的函数?
在MySQL中,除了常用的SELECT、INSERT、UPDATE等基本操作外,还有许多复杂且功能强大的函数,它们能够处理各种复杂的数据处理需求。这些函数虽然在日常开发中可能不常使用,但在特定场景下却能够发挥巨大的作用。下面,我将…...
Redis-07 Redis哨兵
操作实现 此处应该6台虚拟机,其中3台是哨兵,但因为内存限制没有那么多 1.将sentinel文件拷贝到/myredis目录下 2.sentinel.conf文件重要参数 新建配置文件sentinel26379.conf sentinel26380.conf sentinel26381.conf bind 0.0.0.0 daemonize yes pr…...
7.qsqlquerymodel 与 qtableview使用
目录 qtableview 委托QStyledItemDelegateQAbstractItemDelegateCheckBoxItemDelegate使用qtableview控制列宽,行高,隐藏拖拽行列 qtableview 委托 //设置单元格委托 void setItemDelegate(QAbstractItemDelegate *delegate); QAbstractItemDelegate *it…...
状态模式(State Pattern)详解
1. 引言 在很多软件系统中,对象的行为往往依赖于其内部状态,而状态的变化又会影响对象的行为。状态模式(State Pattern)为解决这一问题提供了一种优雅的方法。通过将状态的行为封装到独立的状态对象中,可以使得对象在…...
ajax微信静默登录不起效不跳转问题
问题描述: 今天通过ajax调用方式做微信静默登录,发现本地可以跳转,到线上地址死活都不跳转,就像没起作用一般,经许久排查发现,是因为https和http域名的问题,线上只配置了http域名࿰…...
参数估计理论
估计理论的主要任务是在某种信号假设下,估算该信号中某个参数(比如幅度、相位、达到时间)的具体取值。 参数估计:先假定研究的问题具有某种数学模型, 如正态分布,二项分布,再用已知类别的学习样…...
mybatis插入数据运行成功但数据库没有数据,id却在增长,是什么原因??
错误描述: mybatis插入数据运行成功,但是数据库却没有数据,id也在增加 原因:在测试方法上面加了 Transactional 虽然日志显示插入语句执行成功,但可能事务在提交过程中出现了问题。比如在后续的操作中有异常抛出导…...
Hadoop简介及单点伪分布式安装
目录 1. 大数据2. Hadoop简介3. Hadoop伪分布式安装4. Hadoop启动参考 1. 大数据 大数据的定义:一种规模大到在获取、存储、管理、分析方面大大超出传统数据库软件工具能力范围的数据集合。 特征: 1.海量的数据规模 2.快速的数据流转 3.…...
网站架构知识之Ansible模块(day021)
1.Ansible模块 作用:通过ansible模块实现批量管理 2.command模块与shell模块 command模块是ansible默认的模块,适用于执行简单的命令,不支持特殊符号 案列01,批量获取主机名 ansible all -m command -a hostname all表示对主机清单所有组…...
是时候用开源降低AI落地门槛了
过去三十多年,从Linux到KVM,从OpenStack到Kubernetes,IT领域众多关键技术都来自开源。开源技术不仅大幅降低了IT成本,也降低了企业技术创新的门槛。 那么,在生成式AI时代,开源能够为AI带来什么?…...
操作系统学习笔记-5.1-IO设备
文章目录 I/O控制器I/O 控制器的组成I/O 控制器的工作流程I/O 控制器的类型I/O 控制器的主要功能I/O 控制器与操作系统的交互DMA 的工作原理DMA 传输模式DMA 控制器的组成 组成内存映像I/O,寄存器独立编址 IO软件层次用户层 I/O 软件设备独立性软件层设备驱动程序中…...
Prism `IContainerRegistry` 详细调查与讲解
Prism IContainerRegistry 详细调查与讲解 1. 什么是 IContainerRegistry? IContainerRegistry 是 Prism Library 提供的依赖注入容器抽象注册接口。它位于 Prism.Ioc 命名空间。 作用:在 PrismApplication 的 protected override void RegisterTypes(IC…...
DNS 泄露是什么?为什么网络环境检测时要看 DNS
很多人在检查网络环境时,第一反应通常是看 IP。比如 IP 显示在哪个地区、运营商是谁、是不是数据中心网络。 但实际上,除了 IP 之外,DNS 也是一个很容易被忽略的关键指标。如果 DNS 查询结果和当前网络出口不一致,就可能出现所谓的…...
Linux编译OpenSSL 3.0.1时,那个烦人的‘Can‘t locate IPC/Cmd.pm’错误,我是这样解决的
解决Linux编译OpenSSL 3.0.1时的Perl模块依赖问题 在Linux环境下从源码编译安装OpenSSL时,开发者常会遇到各种依赖问题,其中Cant locate IPC/Cmd.pm错误尤为常见。这个错误看似简单,却可能让不熟悉Perl模块管理机制的用户陷入困境。本文将深入…...
LabVIEW变量实战指南:从局部、全局到共享变量的高效数据流设计
1. 温度监控系统设计中的变量选择困境 第一次用LabVIEW做温度监控系统时,我在变量选择上栽过大跟头。当时为了图省事,把所有传感器数据都塞进了全局变量,结果系统运行半小时后就开始卡顿,报警响应延迟高达5秒——这对工业场景简直…...
clj-kondo Hook系统完全指南:自定义宏和函数的智能分析
clj-kondo Hook系统完全指南:自定义宏和函数的智能分析 【免费下载链接】clj-kondo Static analyzer and linter for Clojure code that sparks joy 项目地址: https://gitcode.com/gh_mirrors/cl/clj-kondo clj-kondo 是一款为 Clojure 代码提供静态分析和 …...
LOCAL_SENSITIVE_PATTERNS:不经过大模型的本地正则补强:开源免费的WPS AI 软件 察元AI文档助手
LOCAL_SENSITIVE_PATTERNS:不经过大模型的本地正则补强 摘要 本文围绕标题所述主题,结合本仓库当前源码行进行说明。仅供技术理解与内部培训,不构成定密、法务或密码测评结论。文中代码块均摘自本地仓库对应路径与行号。 正文 0. 结论先行 结论先行:保密检查由内置助手…...
OpenClaw Zero Token 实测:不用 API Key,也能免费聚合多家 AI 模型
OpenClaw Zero Token 实测:不用 API Key,也能免费聚合多家 AI 模型 如果你经常在 Claude、ChatGPT、Gemini、DeepSeek、豆包、Kimi、Grok、通义千问之间来回切换,大概率会遇到一个问题: 每个平台都有自己的网页入口,…...
智能体状态管理:会话、上下文与检查点
从一个“跑了三天三夜的Agent突然失忆”说起,聊聊状态管理的那些坑先给你讲一个让我头皮发麻的运维事故。 去年冬天,我们做了一个自动爬取竞品价格并生成调价建议的Agent。它跑得很好,连续工作了三天,完成了两万多件商品的价格监控…...
从数据迷雾到精准洞察:Granblue Fantasy: Relink战斗分析工具深度解析
从数据迷雾到精准洞察:Granblue Fantasy: Relink战斗分析工具深度解析 【免费下载链接】gbfr-logs GBFR Logs lets you track damage statistics with a nice overlay DPS meter for Granblue Fantasy: Relink. 项目地址: https://gitcode.com/gh_mirrors/gb/gbfr…...
CodeWF.Markdown:一个基于 Avalonia 12 的 Markdown 渲染控件
今天这篇文章,站长来聊聊我最近基本开发完成的 CodeWF.Markdown。这是一个基于 C# Avalonia 12 Markdig 做的 Markdown 渲染控件。它最早来自 CodeWF.AvaloniaControls,后来我把 Markdown 相关代码单独拆成了一个仓库和一组 NuGet 包:渲染控…...
