当前位置： 首页 > news >正文

Redis学习——数据不一致怎么办？更新缓存失败了又怎么办？

news 文章来源：https://blog.csdn.net/Blackoutdragon/article/details/142102850 2025/5/15 13:57:50

文章目录

    • 引言
    • 正文
      • 读写缓存的数据一致性
      • 只读缓存的数据一致性
        • 删除和修改数据不一致问题
          • 操作执行失败导致数据不一致
            • 解决办法
        • 多线程访问导致数据不一致问题
        • 总结
    • 总结
    • 参考信息

引言

  • 最近面试快手的时候被问到了缓存不一致怎么解决？一开始还是很懵的，因为会默认将自己带到一个错误的前提下，就是数据已经不一致了，你怎么办？可能会想，遍历缓存，删除比对数据是不是一致的。停下来想一下，一般是修改数据库的时候，你应该怎么操作缓存，才能保证缓存的一致性。我就知道要么删除缓存后续重建，要么直接修改缓存，但是我对于这两种场景的方法了解的并不多，今天借这个机会，完全整理一下！

正文

数据一致分几种情况？

  • 缓存中有数据，必须要和数据库中的数据一致
  • 缓存中本身没有数据，数据库中的值必须要是最新的

常见的缓存的策略主要有两种，分别是读写缓存和只读缓存，不同策略保证缓存一致性的方式是不一样。具体如下

读写缓存的数据一致性

  • 读写缓存是对于数据的所有增删改都需要在缓存中进行，然后在采取对应的写回策略。主要有两种写回策略
    • 同步直写策略
    • 异步写回策略

在这里插入图片描述

同步直写策略

  • 写缓存的时候，同步写数据库，缓存和数据库中的数据是一致的。
    • 需要通过事务机制，保证缓存和数据库更新的原子性，一般是通过tranactional修饰
      • 要么同步更新成功
      • 要么同步更新失败，下次重试

在这里插入图片描述

异步写回策略

  • 写缓存的时候，不同步写入缓存，等到数据从缓存中淘汰的时候，在写入数据库。
    • 问题
      • 一旦缓存崩溃，在缓存中保存的数据，都会崩溃丢失

在这里插入图片描述

只读缓存的数据一致性

  • 如果有数据更新（数据增加和修改），直接写入数据库，缓存只负责读数据

    • 在下述过程中，可以看到整个过程是涉及到多步骤多线程的，除了对于数据的操作是具有原子性的，不可打断的，其他的读数据包括数据库同步删除缓存中的数据，都会存在可能的中断，或者其他线程切入的操作

    在这里插入图片描述

新增数据情况==》不会出现数据不一致的情况

在这里插入图片描述

  • 但是删除数据或者修改数据不一样了，因为中间涉及到需要删除缓存中的数据，这一步执行失败会导致数据不一致的情况，具体情况见下一节！
删除和修改数据不一致问题
操作执行失败导致数据不一致

操作分析

  • 对于删除或者修改数据的操作，需要同时修改缓存和操作数据库，任何一方都有可能执行失败，因为没有办法保证双方的操作具有原子性，也就是同时失败或者同时成功。
  • 下面按照情况，进行逐个分析，分别是删除缓存失败和删除数据库失败两种情况。

删除缓存失败

  • 在下述过程中，删除缓存失败，导致缓存中保存旧版的数据，数据库是新版的数据，两者不一致。
    在这里插入图片描述

修改数据库失败

  • 修改数据库失败了，删除缓存成功了，但是在二次访问会重建缓存，将数据库中的脏数据，还原到缓存中，还是会出现访问错误数据的情况
    在这里插入图片描述

总结

  • 两种操作执行失败带来的数据不一致的情况如下
不同情况潜在问题
先删除缓存，在更新数据库数据库更新失败，导致请求再次访问缓存时，发现缓存缺失，重建缓存，读到的还是旧的数据
先更新数据库，再删除缓存的缓存删除失败，有请求再次访问缓存时，发现缓存命中，返回脏数据，和数据库不一致
解决办法
  • 在上述两种情况中，如果修改数据库的操作执行失败了，其实不会产生数据不一致的问题，因为缓存中的数据和数据库中的数据是一致的，后续数据库执行相应的处理策略。但是缓存删除执行失败，就不一样了。所以这个解决办法，主要是针对缓存删除失败的情况而指定的。

消息队列重试

  • 在进行删除或者修改数据时，将数据保存到消息队列中，如果执行失败，再通过消息队列重试执行，如果执行成功了，就从消息队列中删除对应的值。

在这里插入图片描述

在重试这段时间，一般是存在数据不一致性，一般是通过如下方式解决

  • 引入分布式锁，加锁，防止其他数据在访问，会降低并发性
多线程访问导致数据不一致问题
  • 因为同步缓存需要两步，分别是修改数据库和缓存，这两个步骤之间一般来说不会加锁，这样会降低并发性，不加锁就意味着会出现多线程访问问题，导致数据的不一致。
  • 按照更新数据库和缓存的先后，主要分为两种情况，这里具体讨论一下

1、先修改数据库，然后在删除缓存访问

时间线程1线程2问题
t1删除数据库中的数据a
t2读取缓存中的数据a，缓存命中，读取到不存在的旧值a线程1尚且没有完全删除缓存值，线程2读到缓存中的脏数据a
t3删除缓存中的数据a

在这里插入图片描述

  • 总结
    • 这种情况持续的时间会很短，因为仅仅只要线程1被切换回来，成功删除缓存中值，就能保证后续数据的一致性，并不需要额外的人工干预。影响小

1、先修改数据库，然后在删除缓存访问

时间线程1线程2问题
t1删除缓存中的数据a
t2读取缓存中的数据a，缓存没有命中，访问旧版数据库，重建缓存a1、线程1没有更新数据库的值，线程2会读到旧值；只要缓存不过期中间，后续所有线程读到的都是旧值
t3更新数据库中的数据a缓存中是旧值，数据库中是新值，两者不一样！

解决办法===延迟双删

  • 修改完数据库之后，再进行一次缓存删除操作，执行两次，保证的缓存的数据重建来自更新之后的数据库
  • 具体指令如下
redis.delKey(x);
db.update(x);
Thread.sleep(N);
redis.delKey(x);

在这里插入图片描述

总结
  • 推荐先删除数据库，再删除缓存，主要原因有以下两点
    • 先删除缓存再删除数据库，导致请求因为缓存缺失而访问数据库，给数据库带来压力
    • 延迟双删的时间不好确定
  • 如果对于数据一致性有强要求
    • 更新数据库的时候，暂停redis缓存发送请求，等都弄完了再发送

总结

  • 不总结不知道，之前知道的太浅薄了，关于redis了解的不够深刻，实际上数据不一致不仅仅是删除或者更新缓存那么简单，中间还会涉及到多线程的问题，因为多个更新数据库和删除缓存并不具有原子性，中间有可能被打断，所以需要分情况进行讨论。
  • 出现数据不一致的情况的以及对应的解决方式有两种，具体如下
数据不一致原因解决办法
删除redis执行失败消息队列重试
多线程导致数据不一致延迟双删策略

参考信息

缓存异常——如何解决缓存和数据库不一致的问题

相关文章：

Redis学习——数据不一致怎么办？更新缓存失败了又怎么办？

文章目录 引言正文读写缓存的数据一致性只读缓存的数据一致性删除和修改数据不一致问题操作执行失败导致数据不一致解决办法 多线程访问导致数据不一致问题总结 总结参考信息 引言 最近面试快手的时候被问到了缓存不一致怎么解决？一开始还是很懵的，因为…...

编程日记 2024/9/15 18:36:17

跨境电商代购新纪元：一键解锁全球好物，系统流程全揭秘

添加图片注释，不超过 140 字（可选） 在全球化日益加深的今天，跨境电商代购成为了连接消费者与世界各地优质商品的桥梁。本文将在CSDN平台上，深入剖析跨境电商代购系统的功能流程，带您一窥其背后的技术奥秘与…...

编程日记 2024/9/15 18:35:16

Mac 上终端使用 MySql 记录

文章目录 下载安装终端进入 MySql常用操作查看数据库选择一个数据库查看当前选择的数据库Navcat 打开提示报错参考文章 下载安装 先下载社区版的 MySql 安装的过程需要设置 root 的密码，这个是要进入数据库所设定的，所以要记住 终端进入 MySql 首先输…...

编程日记 2024/9/15 18:33:13

461. 汉明距离

一：题目： 两个整数之间的 汉明距离 指的是这两个数字对应二进制位不同的位置的数目。 给你两个整数 x 和 y，计算并返回它们之间的汉明距离。 示例 1： 输入：x 1, y 4 输出：2 解释： 1 (0 0…...

编程日记 2024/9/15 18:30:11

开发指南061-nexus权限管理

平台后台服务的核心是组件，管理组件的软件有： Apache的Archiva、JFrog的Artifactory、Sonatype的Nexus。 本平台选择nexus。nexus的权限模型是用户-角色-权限体系：通过组合权限定义角色，通过给用户赋角色来赋权限。有关nexus的权…...

编程日记 2024/9/15 18:29:10

Qt 弹出菜单右键菜单 QMenu 设置不同颜色的子项

概述 在Qt中，可以使用样式表（StyleSheet）来自定义 QMenu 的外观，包括其子项（如菜单项QAction）的颜色。但是，这通常可以设置 QMenu 的整体样式，而不能单独设置某个子项的颜色。不过&…...

编程日记 2024/9/15 18:26:06

Git换行符自动转换参数core.autocrlf的用法

core.autocrlf 是 Git 中用于控制换行符自动转换的配置选项。它有以下几个可能的值： 1. true 作用：在 checkin 时将 CRLF 转换为 LF，在 checkout 时将 LF 转换为 CRLF。适用场景：适用于 Windows 用户，希望在本地文件…...

编程日记 2024/9/15 18:24:04

C语言的结构体类型

在我们使用C语言进行编写代码时，常常会使用已经给定的类型来创建变量，比如int型，char型，double型等，而当我们想创建一些较为复杂的东西时，单单用一个类型变量是没办法做到的，比如我们想创建一个…...

编程日记 2024/9/15 18:23:03

illustrator 收集字体插件VBscript

这是早些年从俄罗斯网站上看到的一个收集字体插件，语言是用VBscript写的，能用，但个别字体不能收集完成，现在Adobe也在illustrator中加入了收集字体打包功能，所以这个也很少用啦。 使用方法： 下好插件，或把下面的代码存入到本地侯后缀名改为.vbs，然后把.ai文件往.vbs文…...

编程日记 2024/9/15 18:22:02

【LLM多模态】文生视频评测基准VBench

note VBench的16个维度自动化评估指标代码实践（待完成）16个维度的prompt举例人类偏好标注：计算VBench评估结果与人类偏好之间的相关性、用于DPO微调 文章目录 note一、相关背景二、VBench评测基准概述：论文如何解决这个问题&…...

编程日记 2024/9/15 18:21:01

通过覆写 url_for 将 flask 应用部署到子目录下

0. 缘起 最近用 flask 写了一个 web 应用，需要部署到服务器上。而服务器主域名已经被使用了，只能给主域名加个子目录进行部署，比如主域名 example.org ，我需要在 example.org/flask 下部署。这时 flask 应用里的内部连接们就出现…...

编程日记 2024/9/15 18:18:59

攻防世界----＞埃尔隆德32

做题笔记。 下载 查壳。 32ida 打开。 发现就一个判断。 跟进看看。 // 首次a20 int __cdecl sub_8048414(_BYTE *a1, int a2) {int result; // eaxswitch ( a2 ){case 0:if ( *a1 105 )goto LABEL_19;result 0;break;case 1:if ( *a1 101 ) // e…...

编程日记 2024/9/15 18:15:56

redis短信登录模型

基于Session实现登录 ，...

编程日记 2024/9/15 18:13:54

【React】React18.2.0核心源码解读

前言 本文使用 React18.2.0 的源码，如果想回退到某一版本执行git checkout tags/v18.2.0即可。如果打开源码发现js文件报ts类型错误请看本人另一篇文章：VsCode查看React源码全是类型报错如何解决。 阅读源码的过程： 下载源码 观察 package…...

编程日记 2024/9/15 18:08:49

深度学习-目标检测(四)-Faster R-CNN

目录 一.模型框架 二：步骤详细 1.conv layers 2.RPN 3.anchors 4.cls layer分类 5.reg layer回归 6.Proprosal 7.Rol pooling 8.Classification 三.训练 1.训练RPN网络 2.全连接层部分训练： 都看到这里了，点个赞把！&a…...

编程日记 2024/9/15 18:07:48

MATLAB中的无线通信系统设计有哪些最佳实践

在无线通信系统设计领域，MATLAB提供了一套强大的工具箱，使得系统设计、仿真、测试和分析变得更加高效和精确。本文将探讨MATLAB在无线通信系统设计中的最佳实践，包括信号处理、调制与解调、信道建模、误码率分析以及无线通信标准的实现。 1.…...

编程日记 2024/9/15 18:01:42

Java的发展史与前景

🌈个人主页：Yui_ 🌈Linux专栏：Linux 🌈C语言笔记专栏：C语言笔记 🌈数据结构专栏：数据结构 🌈C专栏：C 文章目录 0. Java语言的发展史1.概述1.1 什么是Java1.2 …...

编程日记 2024/9/15 18:00:41

2024年上海小学生古诗文大会倒计时30多天：做几道今年的官方模拟题

2024年上海市小学生古诗文大会自由报名活动的初赛日期于10月19日开始，距离今天只有34天了。 小学生古诗文大会考什么？怎么考呢？今天好真题就带着大家来做一做官方发布的2024年小学生古诗文大会的模拟题，根据往年的经验&#xff0…...

编程日记 2024/9/15 17:59:39

IDEA 常用配置和开发插件

件市场中搜索并安装“Git Integration”插件。 一、前言 在本篇文章中我会为大家总结一些我自己常用的配置和开发插件，此外也给大家提供一个建议，可以根据自己的项目需求和个人偏好选择适合的插件。另外，IDEA 也在不断更新，可能会…...

编程日记 2024/9/15 17:58:38

还在为企微联系人烦恼？一招解决！企业微信2024年效率升级全攻略

现在信息多得让人眼花，微信里头那些企业微信的联系人是不是让你头疼？ 看着满屏的绿色头像，心里想：“我就想和朋友聊聊天，怎么就这么难？”别急，今天教你个办法，轻松搞定这些小烦恼&am…...

编程日记 2024/9/15 17:56:36

【docker npm】npm 私库

1.部署环境 window 11 x64Docker Desktop 4.34.1 (166053) Docker Engine v27.2.0 1.1.Docker 镜像源 1.1.1.Docker Engine 配置 {"builder": {"features": {"buildkit": true},"gc": {"defaultKeepStorage": "32…...

编程日记 2024/9/15 17:55:34

完整gpt应用（自用）

qrc.py 把gpt_qrc.qrc转化成gpt_qrc.py pyrcc5 -o icons_rc.py icons.qrc <RCC><qresource prefix"img"><file>img/53.png</file><file>img/ai.png</file><file>img/关闭.png</file><file>img/最小化.png&l…...

编程日记 2024/9/15 17:54:33

【信息论基础第二讲】离散信源的数学模型及其信息测度包括信源的分类、信源的数学模型、离散信源的信息测度、二元信源的条件熵联合熵

一、信源的分类 二、信源的数学模型 1、信源的概念 在通信系统中&#xff0c;收信者在未收到信息以前&#xff0c;对信源发出什么消息是不确定的、随机的、因此我们可以用随机变量、随机序列或者随机过程来描述信源的输出。严格地说&#xff0c;用概率空间来描述信源输出。 …...

编程日记 2024/9/15 17:53:32

在 Spring Boot 项目中连接 IBM AS/400 数据库——详细案例教程

文章目录 1. 添加 jt400 依赖2. 下载 jt400 驱动包依赖下载手动下载下载地址&#xff1a;手动下载 JAR 的步骤&#xff1a; 3. 配置 application.properties 或 application.yml&#xff08;1&#xff09;application.properties&#xff08;2&#xff09;application.yml 4. 数…...

编程日记 2024/9/15 17:51:30

VUE + NODE 历史版本安装

以node 12.20.0为例子&#xff0c;想下载哪个版本&#xff0c;后面写哪个版本 https://registry.npmmirror.com/binary.html?pathnode/v12.20.0/ 安装国内镜像7.1.0 cnpm npm install -g cnpm7.1.0 -g --registryhttps://registry.npmmirror.com 安装vue脚手架4.5.15 cnpm …...

编程日记 2024/9/15 17:49:29

git reset 几点疑问

疑问&#xff1a;使用 git reset --hard <commit-hash-from-branch-B> 将工作区状态reset为其他branch的某点。 如果当前工作区的分支&#xff08;比如 branch A&#xff09;上使用 git reset --hard 将其状态重置为另一个分支&#xff08;比如 branch B&#xff09;的某…...

编程日记 2024/9/15 17:46:26

Rust Windows下编译 静态链接VCRuntime140.dll

Rust 编译出来的exe默认动态链接VC运行库&#xff0c;分发电脑上需要安装有Microsoft Visual C Redistributable for Visual Studio 2015运行库。 编译时能静态链接进去&#xff0c;就省去客户端未安装运行库的问题。方法如下: 只需在当前根目录下新建.cargo\config.toml&#…...

编程日记 2024/9/15 17:45:25

从“天宫课堂”到人工智能：中国少儿编程的未来在哪里？

近日&#xff0c;中国载人航天“天宫课堂”第三次开讲&#xff0c;激发了全国数百万青少年对科技的热情。从航天技术到人工智能&#xff0c;科技的快速发展正不断改变我们的生活&#xff0c;也让越来越多的家长意识到&#xff0c;未来属于那些掌握编程和创新思维的孩子。与其让…...

编程日记 2024/9/15 17:44:24

ARM base instruction -- blr

BLR Branch with Link to Register calls a subroutine at an address in a register, setting register X30 to PC4. 带寄存器链接的分支在寄存器中的某个地址调用一个子程序&#xff0c;将寄存器 X30 (lr) 设置为 PC4。 BLR <Xn> BLR 跳转到reg内容地址&#xff0c;…...

编程日记 2024/9/15 17:41:21

宠物猫领养馆会员管理系统---附源码72579

目录 1 绪论 1.1 课题目的与意义 1.2国内外研究现状 1.3论文结构与章节安排 1.4 express框架介绍 2 宠物猫领养馆会员管理系统系统分析 2.1 可行性分析 2.1.1 技术可行性分析 2.1.2 经济可行性分析 2.1.3 操作可行性分析 2.2 系统功能分析 2.2.1 功能性分析 2.2.2 …...

编程日记 2024/9/15 17:39:07