当前位置: 首页 > news >正文

Redis冲冲冲——事务支持,AOF和RDB持久化

目录

  • 引出
  • Redis事务支持,AOF和RDB持久化
    • 1、Redis的事务支持
    • 2、Redis的持久化
  • Redis冲冲冲——缓存三兄弟:缓存击穿、穿透、雪崩
    • 缓存击穿
    • 缓存穿透
    • 缓存雪崩
  • 总结

引出

Redis冲冲冲——事务支持,AOF和RDB持久化


Redis事务支持,AOF和RDB持久化

1、Redis的事务支持

事务:一段具有明确开始,结束标记的,并且执行顺序是有序的执行过程!

比如:张三给李四转钱 5000

ACID:原子性,一致性,隔离性,持久性

咱们Redis同样支持事务!配合关系型数据库进行事务支持!

开启事务:multi

执行事务:exec

撤销事务:discard

监控某Key:watch 采用原理:乐观锁

在这里插入图片描述

乐观锁:依靠版本控制来进行实现,底层原理:CAS Comparable And Swap 比较并交换 (用户在操作库的时候,乐观的认为:一定没有人和我同时操作同一条数!)


悲观锁:(用户在操作库的时候,悲观的认为:一定有人和同时操作同一条数据),依旧数据库底层上锁:在SQL语句后,添加:select * from 表 for update;

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

在需要控制事务的方法上,添加注解@Transactional

2、Redis的持久化

Redis的数据,更多的依赖于内存,问题:可能存在数据丢失的问题

解决:Redis提供持久化机制(RDB,AOP)

所以Redis为了解决内存不靠谱的问题, 提供2种:硬盘持久化方案

RDB AOF

(1)、RDB

Redis Database Backup file

RDB (Redis Database)是Redis默认的一种持久化方案!叫:快照模式

原理:dump.rdb文件来进行存储Redis当前的数据状态!

下载Redis的配置文件:

curl -o redis.conf https://raw.githubusercontent.com/redis/redis/6.0/redis.conf

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

60S—-1分钟范围内,如果redis监控到有10000条数据的变化,开始持久化

300S—5分钟范围内,如果redis监控到有10条数据的变化,开始持久化

900S —15分钟范围内,如果redis监控到有1条数据的变化,开始持久化

所以RDB在一定程度上,可能存在数据丢失的问题

在这里插入图片描述

Redis服务器,会定时开启子进程,在固定时间扫描内存的数据变化 ,当条件满足,则将变化先通过临时文件中去,最后

再将临时文件的内容,写入到dump.rdb文件中,即可完成持久化


如果需要修改:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

取消本机绑定

在这里插入图片描述

取消本机客户端保护模式

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

为了保护redis,请大家设置连接密码:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

提醒下:在vim中使用“/关键字”快速查找关键字;并通过N或n 快速定位上一个/下一个

修改redis.conf的权限

chmod 777 redis.conf

重新创建一个Redis的Docker容器:

docker run --name myredis -p 6379:6379 -v /root/redis/redis.conf:/usr/local/etc/redis/redis.conf -v /root/redis/data:/data --privileged=true -d redis:latest redis-server /usr/local/etc/redis/redis.conf

(2)、AOF

AOF Append Only File 采用日志追加的方式,来记录Redis的相关操作命令!

MySQL 有一种二进制日志文件,记录:用户对CUD的所有SQL语句!

AOF 记录是用户对Redis所有的命令!不是默认开启的,需要 运维 手动通过配置文件进行开启!

产生一个文件:appendonly.aof

追加方法:everysec (每秒追加一次日志), always(记录每次操作),no (不记录)

修改配置文件,开启AOF:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

配置追加方式:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

AOF重写的原理:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

Redis 会自动监控AOF文件的变化,当AOF文件达到64M,或达到上次重写文件的2倍,就会触发AOF文件重写机制!

通过重写AOF文件来实现持久化,Redis将进程分叉为2个进程,一个主进程,一个子进程;主进程继续响应其他操作,子进程开启重写机制!

在重写时,会产生2个文件,一个AOF的临时文件,一个AOF的缓存文件,临时文件用于重写,缓存文件用于主进程记录最新的命令操作;

子进程通过重写整合命令至新的临时文件,整合完成之后重命名为AOF文件,并整合缓存文件中的其他命令,完成重写

AOF & RDB 如何选择?

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

Redis冲冲冲——缓存三兄弟:缓存击穿、穿透、雪崩

缓存击穿

缓存击穿:redis中没有,但是数据库有

顺序:先查缓存,判断缓存是否存在;如果缓存存在,直接返回数据;如果缓存不存在,則查询数据库,将数据库的数据存入到缓存

在这里插入图片描述

解决方案:将热点数据设置过期时间长一点;针对数据库的热点访问方法上分布式锁;

缓存穿透

缓存穿透:redis中没有,数据库也没有

在这里插入图片描述

解决方案:

(1)将不存在的key,在redis设置值为null;

(2)使用布隆过滤器;

原理:https://zhuanlan.zhihu.com/p/616911933

在这里插入图片描述

布隆过滤器:

如果确认key不存在于redis中,那么就一定不存在;

它说key存在,就有可能存在,也可能不存在! (误差)

在这里插入图片描述

布隆过滤器

1、根据配置类中的 key的数量 ,误差率,计算位图数组【二维数组】

2、通过布隆过滤器存放key的时候,会计算出需要多少个hash函数,由hash函数算出多少个位图位置需要设定为1

3、查询时,根据对应的hash函数,判断对应的位置值是否都为1;如果有位置为0,则表示key一定不存在于该redis服务器中;如果全部位置都为1,则表示key可能存在于redis服务器中;

缓存雪崩

缓存雪崩:

Redis的缓存雪崩是指当Redis中大量缓存数据同时失效或者被清空时,大量的请求会直接打到数据库上,导致数据库瞬时压力过大,甚至宕机的情况。

造成缓存雪崩的原因主要有两个:

1.相同的过期时间:当Redis中大量的缓存数据设置相同的过期时间时,这些数据很可能会在同一时间点同时失效,导致大量请求直接打到数据库上。

2.缓存集中失效:当服务器重启、网络故障等因素导致Redis服务不可用,且缓存数据没有自动进行容错处理,当服务恢复时大量的数据同时被重新加载到缓存中,也会导致大量请求直接打到数据库上。

预防缓存雪崩的方法主要有以下几种:

1.设置不同的过期时间:可以将缓存数据的过期时间分散开,避免大量缓存数据在同一时间点失效。

2.使用加锁:可以将所有请求都先进行加锁操作,当某个请求去查询数据库时,如果还没有加载到缓存中,则只让单个线程去执行加载操作,其他线程等待该线程完成后再次进行判断,避免瞬间都去访问数据库从而引起雪崩。

3.提前加载预热:在系统低峰期,可以提前将部分热点数据加载到缓存中,这样可以避免在高峰期缓存数据失效时全部打到数据库上。

4.使用多级缓存:可以在Redis缓存之上再使用一层缓存,例如本地缓存等,当Redis缓存失效时,还能够从本地缓存中获取数据,避免直接打到数据库上。

在这里插入图片描述

本地缓存:ehcache oscache spring自带缓存 持久层框架的缓存


总结

Redis冲冲冲——事务支持,AOF和RDB持久化

相关文章:

Redis冲冲冲——事务支持,AOF和RDB持久化

目录 引出Redis事务支持,AOF和RDB持久化1、Redis的事务支持2、Redis的持久化 Redis冲冲冲——缓存三兄弟:缓存击穿、穿透、雪崩缓存击穿缓存穿透缓存雪崩 总结 引出 Redis冲冲冲——事务支持,AOF和RDB持久化 Redis事务支持,AOF和…...

路由菜单路径匹配方法

优化路由菜单路径匹配算法:实现获取整条线路的路径 引言 在前端开发中,路由菜单的路径匹配是一个常见的需求。我们经常需要根据给定的路径,找到对应的菜单项,并获取整条线路的路径。本文将介绍一个优化的路由菜单路径匹配算法&…...

设计模式浅析(九) ·模板方法模式

设计模式浅析(九) 模板方法模式 日常叨逼叨 java设计模式浅析,如果觉得对你有帮助,记得一键三连,谢谢各位观众老爷😁😁 模板方法模式 概念 模板方法模式(Template Method Pattern)在Java中是…...

无用工作、UBI与AI

有些隐晦和黑暗的事实无法陈述,因为任何的系统中“无用”的结局都是被无情的抛弃和淘汰,AI监督下的人类结局更是如此。 什么是无用工作? 无用无效工作通常指的是那些看似忙碌但实际上对社会或个人没有实质性贡献的工作。这类工作可能包括以下…...

【监控】grafana图表使用快速上手

目录 1.前言 2.连接 3.图表 4.job和path 5.总结 1.前言 上一篇文章中,我们使用spring actuatorPrometheusgrafana实现了对一个spring boot应用的可视化监控。 【监控】Spring BootPrometheusGrafana实现可视化监控-CSDN博客 其中对grafana只是打开了一下&am…...

Django常用命令

一、新建一个新项目 django-admin startproject project_name二、新建一个app 在Django中的一个app代表一个功能模块。开发者可以将不同功能的模块放在不同的app中, 方便代码的复用。 python manage.py startapp appa_name三、数据迁移(更新数据库) 编写好了Model后&#x…...

【center-loss 中心损失函数】 原理及程序解释(更新中)

文章目录 前言问题引出open-set问题抛出 解决方法softmax函数、softmax-loss函数解决代码(center_loss.py)原理程序解释 如何梯度更新首先了解一下基本的梯度下降算法然后 前言 学习一下: 中心损失函数,用于用于深度人脸识别的特…...

什么是 HTTPS 证书?作用是什么?

HTTPS 证书,即超文本传输安全协议证书(Hypertext Transfer Protocol Secure),是网站安全的关键组成部分。它通过 SSL/TLS 加密协议,确保用户与网站之间的数据传输是加密和安全的。 什么是 HTTPS 证书? HT…...

为什么软考报名人数越来越多?

2020年软考报名人数404666人,广东省报考人数超过14万人。 ●2021年软考通信考试报名人数突破100万人,估计软考有90多万。 ●2022年软考通信考试共129万人,估计软考占了120多万人。 ●2023年软考具体报名人数没有公布,但工业和信…...

【投稿优惠|快速见刊】2024年图像,机器学习和人工智能国际会议(ICIMLAI 2024)

【投稿优惠|快速见刊】2024年图像,机器学习和人工智能国际会议(ICIMLAI 2024) 重要信息 会议官网:http://www.icimlai.com会议地址:深圳召开日期:2024.03.30截稿日期:2024.03.20 (先…...

html2canvas 将DOM节点转成图片

官网地址:html2canvas - Screenshots with JavaScript 将js文件保存到本地 可以新建一个txt文件,然后丢进去修改后缀名称即可。 在项目中引入js文件: import html2canvas from "../html2canvas.min.js" 这是我准备画的DOM节点。…...

【多线程】常见锁策略详解(面试常考题型)

目录 🌴 乐观锁 vs 悲观锁🎍重量级锁 vs 轻量级锁🍀自旋锁(Spin Lock)🎋公平锁 vs ⾮公平锁🌳可重⼊锁 vs 不可重⼊锁🎄读写锁⭕相关面试题 常⻅的锁策略 注意: 接下来讲解的锁策略不…...

Python列表操作函数

在Python中,列表(list)是一种可变的数据类型,它包含一系列有序的元素。Python提供了一系列内置的函数和方法来操作列表。以下是一些常用的Python列表操作函数和方法: 列表方法 append(x) 将元素x添加到列表的末尾。 …...

Qt注册类对象单例与单类型区别

1.实现类型SingletonTypeExample #ifndef SINGLETONTYPEEXAMPLE_H #define SINGLETONTYPEEXAMPLE_H#include <QObject>class SingletonTypeExample : public QObject {Q_OBJECT public://只能显示构造类对象explicit SingletonTypeExample(QObject *parent nullptr);//…...

Rocky Linux 运维工具yum

一、yum的简介 ​​yum​是用于在基于RPM包管理系统的包管理工具。用户可以通过 ​yum​来搜索、安装、更新和删除软件包&#xff0c;自动处理依赖关系&#xff0c;方便快捷地管理系统上的软件。 二、yum的参数说明 1、install 用于在系统的上安装一个或多个软件包 2、seach 用…...

linux下的ollama

refs: https://github.com/ollama/ollama/blob/main/docs/linux.md 1)安装 curl -fsSL https://ollama.com/install.sh | sh 2)修改服务配置&#xff0c;打开端口允许所有IP地址 refs(https://github.com/ollama/ollama/blob/main/docs/faq.md#where-are-models-stored) C…...

YOLOv9详细解读,改进提升全面分析(附YOLOv9结构图)

&#x1f951; Welcome to Aedream同学 s blog! &#x1f951; 文章目录 1. 概要1.1 模型结构上的改动:1.2 训练脚本上的改动&#xff1a; 2. 介绍2.1 背景2.2 主要贡献 3. 总体框架3.1 可编程梯度信息&#xff08;PGI&#xff09;3.1.1 辅助可逆分支3.1.2 多级辅助信息 3.2 Ge…...

html基础操练和进阶修炼宝典

文章目录 1.超链接标签2.跳锚点3.图片标签4.表格5.表格的方向属性6.子窗口7.音视频标签8.表单9.文件上传10.input属性 html修炼必经之路—各种类型标签详解加展示&#xff0c;关注点赞加收藏&#xff0c;防止迷路哦 1.超链接标签 <!DOCTYPE html> <html lang"en…...

从Mysql 数据库删除重复记录只保留其中一条(删除id最小的一条)

准备工作&#xff1a;新建表tb_coupon /*Navicat Premium Data TransferSource Server : rootlocalhostSource Server Type : MySQLSource Server Version : 50527Source Host : localhost:3306Source Schema : leyouTarget Server Type : My…...

从http到websocket

阅读本文之前&#xff0c;你最好已经做过一些websocket的简单应用 从http到websocket HTTP101HTTP 轮询、长轮询和流化其他技术1. 服务器发送事件2. SPDY3. web实时通信 互联网简史web和httpWebsocket协议1. 简介2. 初始握手3. 计算响应健值4. 消息格式5. WebSocket关闭握手 实…...

如何通过M9A智能助手自动化管理《重返未来:1999》日常任务

如何通过M9A智能助手自动化管理《重返未来&#xff1a;1999》日常任务 【免费下载链接】M9A 重返未来&#xff1a;1999 小助手 | Assistant For Reverse: 1999 项目地址: https://gitcode.com/gh_mirrors/m9/M9A 还在为《重返未来&#xff1a;1999》中重复的每日任务而烦…...

告别付费下载!用阿里DataV+Python+ArcGIS,手把手教你自制精准行政区划SHP文件

零成本构建精准行政区划数据&#xff1a;DataVPythonArcGIS全链路实战 在GIS数据领域&#xff0c;行政区划边界文件堪称基础设施级别的存在——无论是城市规划分析、商业选址评估&#xff0c;还是人口统计研究&#xff0c;都离不开精准的行政区划数据支撑。然而现实情况却令人尴…...

PyTorch实战:用Attention Transfer给模型‘开小灶’,提升小模型性能(附完整代码)

PyTorch实战&#xff1a;用Attention Transfer给模型‘开小灶’&#xff0c;提升小模型性能&#xff08;附完整代码&#xff09; 在深度学习领域&#xff0c;模型性能与计算资源之间的博弈从未停止。想象一下这样的场景&#xff1a;你正在开发一款移动端图像识别应用&#xff0…...

古瑞瓦特光伏逆变器资料大解析:8-10KW与5-8KW型号电路图及程序应用概览

光伏逆变器资料 8-10KW 5-8KW古瑞瓦特光伏逆变器电 路图、光伏逆变器资料 古瑞瓦特的5&#xff0d;10KW资料逆变器带程序光伏逆变器资料 8-10KW 5-8KW古瑞瓦特光伏逆变器电 路图、光伏逆变器资料 古瑞瓦特的5&#xff0d;10KW资料逆变器带程序 古瑞瓦特逆变器资料,古瑞瓦特光并…...

如何快速使用AI智能马赛克处理工具:3步实现图片视频隐私保护

如何快速使用AI智能马赛克处理工具&#xff1a;3步实现图片视频隐私保护 【免费下载链接】DeepMosaics Automatically remove the mosaics in images and videos, or add mosaics to them. 项目地址: https://gitcode.com/gh_mirrors/de/DeepMosaics 智能马赛克处理技术…...

告别数据丢失!在STM32CubeIDE上为STM32F0配置DMA串口接收与空闲中断的保姆级教程

STM32F0 DMA串口接收与空闲中断实战指南&#xff1a;从零构建稳定通信框架 引言 在嵌入式开发中&#xff0c;串口通信是最基础也最常用的外设接口之一。对于STM32F0这类资源受限的微控制器&#xff0c;如何高效可靠地处理不定长串口数据一直是个挑战。传统的中断接收方式会频繁…...

Cesium实战:5分钟搞定3D地球可视化(附完整代码)

Cesium实战&#xff1a;5分钟构建高交互3D地球可视化方案 当我们需要在网页中展示全球气象数据、物流轨迹或城市规划时&#xff0c;传统2D地图往往难以满足空间表达需求。Cesium作为当前最强大的开源WebGL地球引擎&#xff0c;能以不到10行核心代码实现从卫星视角到街道级别的3…...

微信小程序/UniApp蓝牙开发:如何优雅地封装一个可复用的蓝牙通信库(Vue3 Composition API)

Vue3UniApp蓝牙通信库架构设计&#xff1a;从零封装高可用BLE管理器 在物联网应用爆发式增长的今天&#xff0c;蓝牙低能耗&#xff08;BLE&#xff09;技术已成为连接智能设备的首选方案。作为前端开发者&#xff0c;当我们面对需要同时控制多台蓝牙打印机、门锁和传感器的商业…...

OpenCV实战:用HoughLinesP函数5分钟搞定车道线检测(Python代码保姆级教程)

OpenCV实战&#xff1a;用HoughLinesP函数5分钟搞定车道线检测&#xff08;Python代码保姆级教程&#xff09; 车道线检测是自动驾驶和辅助驾驶系统的核心技术之一。想象一下&#xff0c;当你驾驶车辆行驶在高速公路上&#xff0c;系统需要实时识别车道线以确保车辆保持在正确的…...

【2026奇点大会核心解码】:多模态虚拟人三大技术断层与企业落地避坑指南

第一章&#xff1a;2026奇点智能技术大会&#xff1a;多模态虚拟人 2026奇点智能技术大会(https://ml-summit.org) 核心突破&#xff1a;跨模态对齐与实时协同生成 本届大会首次公开展示了端到端训练的多模态虚拟人框架「Aurora-7」&#xff0c;其核心创新在于统一时序表征空…...