当前位置： 首页 > news >正文

Redis作为缓存，mysql的数据如何与redis进行同步？

news 2026/2/10 2:13:42

Redis作为缓存，mysql的数据如何与redis进行同步？

一定要设置前提，先介绍业务背景

延时双删

  • 双写一致性:当修改了数据库的数据也要同时更新缓存的数据，缓存和数据库的数据要保持一致
    • 读操作:缓存命中，直接返回;缓存未命中查询数据库，写入缓存，设定超时时间
    • 写操作:延时双删
      • 在这里插入图片描述

问题来了，那么先删除数据库，还是先删除缓存呢？我们都分析一下，这里只分析异常情况

  • 先删除缓存，再删除数据库。假设我们有缓存数据A=10，和数据库数据A=10

    • 线程1先删除缓存
    • 此时线程2查询缓存，未命中，查询数据库A=10，然后写入缓存
    • 线程1然后更新数据库A=20
    • 此时数据不一致了缓存A=10，数据库A=20
      • 在这里插入图片描述

  • 先操作数据库，再删除缓存，假设我们有缓存数据已经过期，和数据库数据A=10

    • 线程1先查询缓存，此时因为我们假设的缓存数据已经过期，查询数据库A=10，还没来得及写入缓存
    • 线程2更新数据库，A=20，然后删除缓存（此时没有缓存，删不删没关系）
    • 线程1写入缓存
    • 此时数据不一致了，缓存A=10，数据库A=20
      • 在这里插入图片描述

我们发现这两种都会导致脏数据的出现，所以，删除两次缓存就出现了。这就是延时双删：删除缓存-修改数据库-延迟一会删除缓存，就是为了降低脏数据的出现，那为什么要延时呢？因为一般情况下，数据库是主从模式，我们要延时一会，让数据库主节点同步到从节点，再删除缓存。但是也会有小问题，因为延时的时间不好把控。所以做不到绝对的强一致。

分布式锁

那有更好的办法吗？我们可以使用分布式锁来解决这个问题

在这里插入图片描述

但是这个显然效率有点太低了，我们可以优化一下

一般缓存数据都是读多写少，我们可以使用读写锁控制

  • 共享锁:读锁readLock，加锁之后，其他线程可以共享读操作排他锁
  • 独占锁writeLock也叫，加锁之后，阻塞其他线程读写操作

这样性能就得到了提升，虽然实现了强一致，但是性能还是有点低

异步通知保证数据最终一致

在这里插入图片描述

最终一致性的保证，主要取决于MQ的可靠性

基于Canal的异步通知

在这里插入图片描述

canal是阿里开发的中间件，主要是基于mysql的主从同步实现的

二进制日志(BNLOG)记录了所有的DDL (数据定义语言)语句和DML(数据操纵语言)语句，但不包括数据查询(SELECT、SHOW）语句。

优点：无代码侵入

总结

  • 允许延时一致的业务，采用异步通知
    • 使用MQ中间中间件，更新数据之后，通知缓存删除
    • 利用canal中间件，不需要修改业务代码，伪装为mysql的一个从节点,canal通过读取binlog数据更新缓
  • 存强一致性的，采用Redisson提供的读写锁
    • 共享锁:读锁readLock，加锁之后，其他线程可以共享读操作排他锁
  • 存强一致性的，采用Redisson提供的读写锁
    • 共享锁:读锁readLock，加锁之后，其他线程可以共享读操作排他锁
    • 独占锁writeLock也叫，加锁之后，阻塞其他线程读写操作

相关文章：

Redis作为缓存，mysql的数据如何与redis进行同步？

Redis作为缓存，mysql的数据如何与redis进行同步？ 一定要设置前提，先介绍业务背景 延时双删 双写一致性:当修改了数据库的数据也要同时更新缓存的数据，缓存和数据库的数据要保持一致 读操作:缓存命中，直接返回;缓存未…...

编程日记 2023/10/9 23:38:21

申请免费 SSL 证书为您的小程序加密通信

在今天的网络环境中，数据安全和隐私保护变得尤为重要。无论是网站还是应用程序，为其提供安全的通信渠道都是至关重要的。对于小程序开发者来说，使用 SSL（Secure Sockets Layer）证书可以有效地保障用户数据的安全&#…...

编程日记 2023/10/9 23:37:20

Go 并发编程

并发编程 1.1 并发与并⾏ 并⾏与并发是两个不同的概念，普通解释： 并发：交替做不同事情的能⼒并⾏：同时做不同事情的能⼒ 如果站在程序员的⻆度去解释是这样的： 并发：不同的代码块交替执⾏并⾏&#xf…...

编程日记 2023/10/9 23:36:19

鱼眼相机去畸变（图像拉直/展开/矫正）算法及实战总结

本文介绍两种方法 1、经纬度矫正法 2、棋盘格矫正法 一、经纬度矫正法 1、算法说明 经纬度矫正法， 可以把鱼眼图想象成半个地球， 然后将地球展开成地图，经纬度矫正法主要是利用几何原理， 对图像进行展开矫正。 经过P点的入射光线…...

编程日记 2023/10/9 23:34:17

es6 数据类型

​ es6 数据类型 map 数据类型 >Map 对象保存键值对。 用途 ： Object的key无法支持该数据时需要了解对象大小时 map 数据类型任何值(对象或者原始值) 都可以作为一个键。 Object 的键只能是字符串 let myMap new Map(); let myMap1 new Map(); var keyStrin…...

编程日记 2023/10/9 23:33:16

【postgresql】

看到group by 1，2 和 order by 1， 2。看不懂，google，搜到了Stack Overflow 上有回答 What does SQL clause “GROUP BY 1” mean? 大概意思就是，group by， order by 后面跟数字，指的是 selec…...

编程日记 2023/10/9 23:32:15

【C++】空间配置器 allocator：原理及底层解析

文章目录 空间配置器一级空间配置器二级空间配置器1. 内存池2. SGI-STL中二级空间配置器设计 - - 哈希桶3. 二级空间配置器的空间申请 空间配置器的默认选择空间配置器的在封装：添加了数据类型大小空间配置器对象的构造与析构 容器中的 allocator 空间配置器 提到空…...

编程日记 2023/10/9 23:31:14

微信小程序 movable-area 区域拖动动态组件演示

movable-area 组件在小程序中的作用是用于创建一个可移动的区域，可以在该区域内拖动视图或内容。这个组件常用于实现可拖动的容器或可滑动的列表等交互效果。 使用 movable-area 组件可以对其内部的 movable-view 组件进行拖动操作，可以通过设置不同的属…...

编程日记 2023/10/9 23:30:13

隔离上网，安全上网

SDC沙盒数据防泄密系统（安全上网，隔离上网） •深信达SDC沙盒数据防泄密系统，是专门针对敏感数据进行防泄密保护的系统，根据隔离上网和安全上网的原则实现数据的代码级保护，不会影响工作效率，不…...

编程日记 2023/10/9 23:29:11

NOSQL Redis 数据持久化 RDB、AOF（二） 恢复

redis 执行flushall 或 flushdb 也会产生dump.rdb文件，但里面是空的。 注意：千万执行，不然rdb文件会被覆盖的。 dump.rdb 文件如何恢复数据 讲备份文件 dump.rdb 移动到redis安装目录并启动服务即可。 dump.rdb 自动触发 和手动触发 自…...

编程日记 2023/10/9 23:27:08

UDP通信

UDP通信 #include <sys/types.h> #include <sys/socket.h> ssize_t sendto(int sockfd, const void *buf, size_t len, int flags,const struct sockaddr *dest_addr, socklen_t addrlen); - 参数&#xff1a;- sockfd : 通信的fd- buf : 要发送的数据- len : 发送…...

编程日记 2023/10/9 23:26:07

Bootstrap对溢出内容的两种处理:滚动条和隐藏两种方式

Bootstrap中定义了以下两个类来处理内容溢出的情况&#xff1a; 类overflow-auto&#xff1a;在固定宽度和高度的元素上&#xff0c;如果内容溢出了元素&#xff0c;将生成一个垂直滚动条&#xff0c;通过滚动条可以查看溢出的内容。 类overflow-hidden:在固定宽度和高度的元素…...

编程日记 2023/10/9 23:25:07

elasticsearch基本语法

这里写自定义目录标题 elasticsearch简介基本语法索引创建索引修改索引删除索引 查询简单查询精确查询条件查询范围查询&#xff1a;聚合查询&#xff1a;排序和分页&#xff1a; 参考文献&#xff1a; elasticsearch简介 Elasticsearch 是一个开源的分布式搜索和分析引擎&…...

编程日记 2023/10/9 23:23:05

Maven Spring jar包启动报错 排查

Maven Spring jar包启动报错排查 背景 maven 编译jar包&#xff0c;放在linux服务器启动不起来&#xff0c;提示&#xff1a;xxxx-0.0.1-SNAPSHOT.jar中没有主清单属性 原因 pom 配置文件&#xff0c;多了 <skip>true</skip> <build><plugins>&l…...

编程日记 2023/10/9 23:22:04

LeetCode-2485-找出中枢整数

题目描述&#xff1a; 给你一个正整数 n &#xff0c;找出满足下述条件的 中枢整数 x &#xff1a; 1 和 x 之间的所有元素之和等于 x 和 n 之间所有元素之和。 返回中枢整数 x 。如果不存在中枢整数&#xff0c;则返回 -1 。题目保证对于给定的输入&#xff0c;至多存在一个中…...

编程日记 2023/10/9 23:21:02

nano pi m1配置脚本（全志H3）

为nanopi m1写一个自动配置脚本&#xff0c;简化自己的操作 配置&#xff1a;H3芯片&#xff0c;1G内存&#xff0c;64G卡 系统&#xff1a;friendlycore focal 4.14版本 一、系统安装 烧录系统后&#xff0c;插入机器&#xff0c;但是使用df -ih发现只有900K的nodes&#xff…...

编程日记 2023/10/9 23:20:01

linux--gdb的使用

1&#xff0c;Makefile默认release版本&#xff0c;要想进入debug版本需添加-g后缀 2&#xff0c;进入调试界面&#xff1a;gdb 可执行程序 3&#xff0c;显示代码&#xff1a;l&#xff08;list&#xff09; 数字&#xff08;1/0&#xff09; 不停回车可一直显示到结束并显…...

编程日记 2023/10/9 23:19:00

JVM命令行监控工具

JVM命令行监控工具 概述 性能诊断是软件工程师在日常工作中需要经常面对和解决的问题&#xff0c;在用户体验至上的今天&#xff0c;解决好应用的性能问题能带来非常大的收益。 Java作为最流行的编程语言之一&#xff0c;其应用性能诊断一直受到业界广泛关注&#xff0c;可能…...

编程日记 2023/10/9 23:17:59

系统架构设计：4 论微服务架构及其应用

目录 一 微服务架构 1 微服务 2 微服务架构的优点 ３微服务面临的挑战...

编程日记 2023/10/9 23:16:56

【C++设计模式之建造者模式:创建型】分析及示例

简介 建造者模式&#xff08;Builder Pattern&#xff09;是一种创建型设计模式&#xff0c;它将复杂对象的构建过程与其表示分离&#xff0c;使得同样的构建过程可以创建不同的表示。 描述 建造者模式通过将一个复杂对象的构建过程拆分成多个简单的部分&#xff0c;并由不同…...

编程日记 2023/10/9 23:13:53

【第二十一章 SDIO接口(SDIO)】

第二十一章 SDIO接口 目录 第二十一章 SDIO接口(SDIO) 1 SDIO 主要功能 2 SDIO 总线拓扑 3 SDIO 功能描述 3.1 SDIO 适配器 3.2 SDIOAHB 接口 4 卡功能描述 4.1 卡识别模式 4.2 卡复位 4.3 操作电压范围确认 4.4 卡识别过程 4.5 写数据块 4.6 读数据块 4.7 数据流…...

编程新知 2026/2/1 13:28:03

在 Nginx Stream 层“改写”MQTT ngx_stream_mqtt_filter_module

1、为什么要修改 CONNECT 报文&#xff1f; 多租户隔离&#xff1a;自动为接入设备追加租户前缀&#xff0c;后端按 ClientID 拆分队列。零代码鉴权&#xff1a;将入站用户名替换为 OAuth Access-Token&#xff0c;后端 Broker 统一校验。灰度发布&#xff1a;根据 IP/地理位写…...

编程新知 2025/8/1 10:20:23

前端开发面试题总结-JavaScript篇(一)

文章目录 JavaScript高频问答一、作用域与闭包1.什么是闭包&#xff08;Closure&#xff09;&#xff1f;闭包有什么应用场景和潜在问题&#xff1f;2.解释 JavaScript 的作用域链&#xff08;Scope Chain&#xff09; 二、原型与继承3.原型链是什么&#xff1f;如何实现继承&a…...

编程新知 2026/2/1 3:12:03

Angular微前端架构：Module Federation + ngx-build-plus (Webpack)

以下是一个完整的 Angular 微前端示例&#xff0c;其中使用的是 Module Federation 和 npx-build-plus 实现了主应用&#xff08;Shell&#xff09;与子应用&#xff08;Remote&#xff09;的集成。 &#x1f6e0;️ 项目结构 angular-mf/ ├── shell-app/ # 主应用&…...

编程新知 2025/12/3 10:52:37

Python 包管理器 uv 介绍

Python 包管理器 uv 全面介绍 uv 是由 Astral&#xff08;热门工具 Ruff 的开发者&#xff09;推出的下一代高性能 Python 包管理器和构建工具&#xff0c;用 Rust 编写。它旨在解决传统工具&#xff08;如 pip、virtualenv、pip-tools&#xff09;的性能瓶颈&#xff0c;同时…...

编程新知 2026/2/7 10:47:09

浪潮交换机配置track检测实现高速公路收费网络主备切换NQA

浪潮交换机track配置 项目背景高速网络拓扑网络情况分析通信线路收费网络路由 收费汇聚交换机相应配置收费汇聚track配置 项目背景 在实施省内一条高速公路时遇到的需求&#xff0c;本次涉及的主要是收费汇聚交换机的配置&#xff0c;浪潮网络设备在高速项目很少&#xff0c;通…...

编程新知 2026/2/6 13:10:51

【分享】推荐一些办公小工具

1、PDF 在线转换 https://smallpdf.com/cn/pdf-tools 推荐理由&#xff1a;大部分的转换软件需要收费&#xff0c;要么功能不齐全&#xff0c;而开会员又用不了几次浪费钱&#xff0c;借用别人的又不安全。 这个网站它不需要登录或下载安装。而且提供的免费功能就能满足日常…...

编程新知 2026/1/25 14:40:59

深度学习水论文：mamba＋图像增强

&#x1f9c0;当前视觉领域对高效长序列建模需求激增&#xff0c;对Mamba图像增强这方向的研究自然也逐渐火热。原因在于其高效长程建模&#xff0c;以及动态计算优势&#xff0c;在图像质量提升和细节恢复方面有难以替代的作用。 &#x1f9c0;因此短时间内&#xff0c;就有不…...

编程新知 2026/1/26 4:52:47

深入理解Optional：处理空指针异常

1. 使用Optional处理可能为空的集合 在Java开发中&#xff0c;集合判空是一个常见但容易出错的场景。传统方式虽然可行&#xff0c;但存在一些潜在问题&#xff1a; // 传统判空方式 if (!CollectionUtils.isEmpty(userInfoList)) {for (UserInfo userInfo : userInfoList) {…...

编程新知 2025/12/19 19:15:39

云原生周刊：k0s 成为 CNCF 沙箱项目

开源项目推荐 HAMi HAMi&#xff08;原名 k8s‑vGPU‑scheduler&#xff09;是一款 CNCF Sandbox 级别的开源 K8s 中间件&#xff0c;通过虚拟化 GPU/NPU 等异构设备并支持内存、计算核心时间片隔离及共享调度&#xff0c;为容器提供统一接口&#xff0c;实现细粒度资源配额…...

编程新知 2025/12/1 3:15:17