当前位置: 首页 > article >正文

尚硅谷redis7 33-36 redis持久化之RDB优缺点及数据丢失案例

官网说明优点:

  • RDB是Redis数据的一个非常紧凑的单文件时间点表示,RDB文件非常适合备份。例如,您可能希望在最近的24小时内每小时旧档一次RDB文件,并在30天内每天保存一个RDB快照,这使您可以在发生来难时轻松恢复不同版本的数据集。
  • RDB非常适合灾难恢复,它是一个可以传输到远程数据中心或Amazon S3(可能已加密)的压编文件。
  • RDB最大限度地提高了Redis的性能,因为Redis父进程为了持久化而需要做的唯一工作就是派生一个将完成所有其余工作的子进程。父进程永远不会执行磁盘I/O或类似操作。
  • 与AOF相比,RDB允许使用大数据集更快地重启。
  • 在副本上,RDB支持重启和故障转移后的部分重新同步。

总结RDB的优点:

  1. 适合大规模的数据恢复
  2. 按照业务定时备份
  3. 对数据完整性和一致性要求不高
  4. RDB文件在内存中的加载速度要比AOF快得多

官网说明缺点:

  • 如果您需要在Redis停止工作时(例如断电后)将数据丢失的可能性降到最低,那么RDB并不好。您可以配置生成RDB的不同保存点例如,在对数据集至少5分钟和100次写入之后,您可以有多个保存点)。但是,您通常会每五分钟或更长时间创建一次RDB快照,因此,如果Redis由于任何原因在没有正确关闭的情况下停止工作,您应该准备好丢失最新分钟的数据。
  • RDB需要经常fork()以便使用子进程在磁盘上持久化。如果数据集很大,fork()可能会很耗时,并且如果数据集很大并且CPU性能不是很好,可能会导致Redis停止为客户端服务几毫秒甚至一秒钟。AOF也需要fork0但频率较低,您可以调整要重写日志的频率,而不需要对持久性进行任何权衡。

总结RDB的缺点:

  • 在一定间隔时间做一次备份,所以如果redis意外down掉的话,就会丢失从当前至最近一次快照期间的数据,快照之间的数据会丢失
  • 内存数据的全量同步,如果数据量太大会导致I/0严重影响服务器性能
  • RDB依赖于主进程的fork,在更大的数据集中,这可能会导致服务请求的瞬间延迟。fork的时候内存中的数据被克隆了一份,大致2倍的膨胀性,需要考虑

前提:save 5 2   5秒内修改两次即自动触发save

操作1:目前未生成rdb文件

操作2:5秒内有k1 k2两次操作

操作3:发现生成rdb文件

操作4:set k3 

操作5:发现rdb文件的生成时间和操作3相同,并没有生成新的rdb文件

操作6:检查redis数据库,只有k1 k2 k3三个数据。还未写入k4,redis宕机

蓝色框表示宕机后redis重新连接后,只有k1 k2没有k3

34 redis持久化之RDB修复命令简介

dump.rdb文件在写入和迁移的过程中可能会出现文件破损。

首先cd /usr/local/bin  目录中存在redis-check-rdb

对于稍微破损的rdb文件,可以用redis-check-rdb修复

redis-check-rdb /myredis/dumpfiles/dump6379.rdb

35 redis持久化之RDB触发小结和快照禁用

哪些情况会触发RDB快照

  • 配置文件中默认的快照配置
  • 手动save/bgsave命令
  • 执行flushall/flushdb命令也会产生dump.rdb文件,但里面是空的,无意义
  • 执行shutdown且没有设置开启AOF持久化
  • 主从复制时,主节点自动触发

如何禁用快照

动态所有停止RDB保存规则的方法:redis-cli config set save ""【命令级别】

  • 立即生效(不需要重启 Redis)

  • 只影响当前运行实例

  • 重启 Redis 后会失效(恢复为配置文件中的设置)

快照禁用【通过配置文件修改】

  • 永久禁用 RDB 快照,如图去掉save ""的注释

redis持久化之RDB优化参数

配置文件中的SNAPSHOTTING模块可以配置RDB

save <seconds> <changes>

dbfilename

dir

stop-writes-on-bgsave-error

stop-writes-on-bgsave-error 是 Redis 中的一个配置项,用来控制当 RDB 持久化失败时,是否阻止写入操作

默认yes:表示当 Redis 执行 BGSAVE(后台保存 RDB 文件)失败时,将拒绝客户端的写入操作,以避免数据进一步丢失。
如果配置成no,表示你不在乎数据不一致或者有其他的手段发现和控制这种不一致,那么在快照写入失败时,也能确保redis继续接受新的写请求

rdbcompression

默认yes
对于存储到磁盘中的快照,可以设置是否进行压缩存储。如果是的话,redis会采用LZF算法进行缩。
如果你不想消耗CPU来进行压缩的话,可以设置为关闭此功能

rdbchecksum

默认yes
在存储快照后,还可以让redis使用CRC64算法来进行数据校验,但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能

rdb-del-sync-files

当 Redis 没有启用持久化(即 RDB 和 AOF 都禁用)时,Redis 会在复制(replication)完成后自动删除生成的临时 RDB 文件。默认情况下no,此选项是禁用的。

相关文章:

尚硅谷redis7 33-36 redis持久化之RDB优缺点及数据丢失案例

官网说明优点&#xff1a; RDB是Redis数据的一个非常紧凑的单文件时间点表示,RDB文件非常适合备份。例如,您可能希望在最近的24小时内每小时旧档一次RDB文件,并在30天内每天保存一个RDB快照,这使您可以在发生来难时轻松恢复不同版本的数据集。RDB非常适合灾难恢复,它是一个可以…...

No such file or directory: ‘ffprobe‘

目录 详细信息&#xff1a; 解决方法&#xff1a; No such file or directory: ffprobe 详细信息&#xff1a; File "/usr/local/lib/python3.10/dist-packages/framepump/framepump.py", line 168, in get_duration return float(ffmpeg.probe(video_path)[form…...

计算机网络-WebSocket/DNS/Cookie/Session/Token/Jwt/Nginx

文章目录 WebSocketDNS什么是dns域名解析底层协议 cookie/sessionToken/JWTNginx WebSocket 一种网络通信协议&#xff0c;允许在单个 TCP&#xff08;半双工&#xff09; 连接上进行全双工通信&#xff08;客户端和服务器可同时双向传输数据&#xff09;。 HTTP是基于请求-响…...

功能“递归模式”在 C# 7.3 中不可用,请使用 8.0 或更高的语言版本的一种兼容处理方案

原程序&#xff1a; internal class ControllerParameterCreator : IParameterCreator {private Controller controller;public ControllerParameterCreator(Controller controller){this.controller controller;}public Parameter CreateSystem(string name, int unused){re…...

第4章-操作系统知识

存储管理 固定分区&#xff1a;一种静态分区方式请求分页存储管理覆盖技术&#xff1a;覆盖技术是指让作业中不同时运行的程序模块共同使用同一主存区域。...

将网页带格式转化为PDF

# 一、安装插件 SingleFile | 将完整的页面保存到一个 HTML 文件中 – 下载 &#x1f98a; Firefox 扩展&#xff08;zh-CN&#xff09; 打开火狐浏览器&#xff0c;安装上面的插件 # 二、下载html单文件 打开对应的网页&#xff0c;点击插件下载对应的html文件 # 三、打开…...

【ArcGIS】ArcGIS AI 助手----复现

github地址 korporalK/Archer-GIS-AI-Assitant&#xff1a;Archer 在 ArcGIS Pro 中将自然语言命令转换为自动化 GIS 工作流。它使用代理框架&#xff08;计划-验证-执行&#xff09;构建并由 LLM 提供支持&#xff0c;可简化空间分析、减少手动工作并使 GIS 更易于访问。Arch…...

使用 FFmpeg 将视频转换为高质量 GIF(保留原始尺寸和帧率)

在制作教程动图、产品展示、前端 UI 演示等场景中,我们经常需要将视频转换为体积合适且清晰的 GIF 动图。本文将详细介绍如何使用 FFmpeg 工具将视频转为高质量 GIF,包括: ✅ 保留原视频尺寸或自定义缩放✅ 保留原始帧率或自定义帧率✅ 使用调色板优化色彩质量✅ 降低体积同…...

《Java vs Go vs C++ vs C:四门编程语言的深度对比》

引言​​ 从底层硬件操作到云端分布式系统&#xff0c;Java、Go、C 和 C 四门语言各自占据不同生态位。本文从​​设计哲学​​、​​语法范式​​、​​性能特性​​、​​应用场景​​等维度进行对比&#xff0c;为开发者提供技术选型参考。 一、​​设计哲学与历史定位​​…...

充电枪IEC62196/EN 62196测试内容

充电枪IEC62196/EN 62196测试内容 一、机械性能测试 插拔力测试 交流充电接口的插入/拔出力需≤100N&#xff0c;直流接口≤140N。若使用助力装置&#xff0c;操作力仍需满足上述要求。 测试方法&#xff1a;通过弹簧秤或专用试验机&#xff08;如Sun-CB设备&#xff09;测…...

有效的字母异位符--LeetCode

题目 给定两个字符串 s 和 t &#xff0c;编写一个函数来判断 t 是否是 s 的 字母异位词。 示例 1: 输入: s "anagram", t "nagaram" 输出: true示例 2: 输入: s "rat", t "car" 输出: false 思路一&#xff1a;排序 t 是 s …...

SAP ERP 系统拆分的七大挑战

在企业变革或管理运营风险时&#xff0c;剥离IT系统能带来显著效益&#xff0c;但SAP ERP系统的复杂性使得这项工作充满挑战。如果管理不当&#xff0c;可能会导致数据不一致、运营中断、合规风险和意外成本。由于SAP ERP系统深度集成于企业核心业务流程中&#xff0c;其拆分工…...

AcrelEMS 3.0智慧能源管理平台:构建企业微电网数智化中枢

安科瑞电气顾强 在"双碳"目标驱动下&#xff0c;企业能源管理正从粗放式运营向精细化、智能化转型。AcrelEMS 3.0智慧能源管理平台以微电网为核心载体&#xff0c;通过"感知-分析-决策-控制"的全链路数字化能力&#xff0c;助力工商企业、医疗机构、教育机…...

【HTML-12】HTML表格常用属性详解:从基础到高级应用

表格是HTML中最强大且常用的元素之一&#xff0c;它能够以结构化的方式展示数据。本文将全面介绍HTML表格的常用属性&#xff0c;帮助您创建美观、响应式且语义化的数据表格。 1. HTML表格基础结构 在深入了解属性之前&#xff0c;我们先回顾一下HTML表格的基本结构&#xff…...

Word转PDF--自动生成目录

1-Word文档中已经包含自动生成的目录&#xff1b; 2-选择“文件”&#xff1b; 3-另存为&#xff0c;PDF&#xff1b; 4-选择“选项”按钮&#xff0c;在弹出的窗口中&#xff0c;勾选“创建书签时使用标题”。...

MySQL组合索引优化策略

优化MySQL组合索引需要综合考虑查询模式、索引结构及数据库特性。以下是关键优化策略及示例&#xff1a; 1. 遵循最左前缀原则 策略&#xff1a;确保查询条件包含组合索引最左侧列。示例&#xff1a;索引(a,b,c)生效场景&#xff1a;WHERE a1 AND b2 -- ✔️ 使用a和b W…...

Spring MVC 的的核心原理与实践指南

一、Spring MVC 概述 Spring MVC 是 Spring 框架中的一个重要模块&#xff0c;用于构建基于 Java 的 Web 应用程序。它遵循模型-视图-控制器&#xff08;MVC&#xff09;设计模式&#xff0c;提供了一种结构化的方式来开发灵活、松耦合的 Web 应用。 Spring MVC 的特点&#xf…...

轻量级视觉语言模型 Dolphin:高效精准的文档结构化解析利器

在数字化办公和学术研究日益普及的今天&#xff0c;如何高效、准确地处理各类文档图像成为了一个亟需解决的问题。Dolphin 应运而生&#xff0c;作为一款基于异构锚点提示的多模态文档图像解析模型&#xff0c;它不仅打破了传统手动整理文档的繁琐流程&#xff0c;更以远超主流…...

如何安全配置数据库(MySQL/PostgreSQL/MongoDB)

数据库是许多应用程序的核心组成部分&#xff0c;因此保护数据库的安全性至关重要。无论是MySQL、PostgreSQL还是MongoDB&#xff0c;都需要经过适当的安全配置才能防止潜在的安全威胁。本文将介绍如何安全配置这些流行的数据库管理系统&#xff0c;以确保数据的保密性、完整性…...

将 Docker 镜像从服务器A迁移到服务器B的方法

在日常工作中&#xff0c;我们有时会需要将服务器 A上的镜像上传至服务器B上&#xff0c;下面给出具体操作方式&#xff0c;以镜像 postgres:15 为例进行讲解。 首先在服务器A上拉取 镜像 postgres:15 &#xff0c;命令如下&#xff1a; docker pull postgres:15下面再将服务…...

git merge解冲突后,add、continue提交

git merge解冲突后&#xff0c;add、continue提交 git merge操作冲突后&#xff0c;需要手动解冲突&#xff0c;解完冲突后&#xff0c;需要: git add . 然后&#xff0c;进入一般的正常git代码提交流程。 git合并‘merge’其他分支的个别文件到当前branch_gitbash 合并branc…...

Lines of Thought in Large Language Models

Lines of Thought in Large Language Models 《Lines of Thought in Large Language Models》(大语言模型中的思维链)聚焦于分析大语言模型(LLMs)在生成文本时,其内部向量轨迹的统计特性。 核心目标是揭示LLMs复杂的“思维过程”(即文本生成时的隐藏状态变化)能否被简…...

八股战神-JVM知识速查

1.JVM组成 JVM由那些部分组成&#xff0c;运行流程是什么&#xff1f; JVM是Java程序的运行环境 组成部分&#xff1a; 类加载器&#xff1a;加载字节码文件到内存 运行时数据区&#xff1a;包括方法区&#xff0c;堆&#xff0c;栈&#xff0c;程序计数器&#xff0c;本地…...

机试 | STL | string | 文字处理软件

题目&#xff1a; P5734 【深基6.例6】文字处理软件 - 洛谷 不使用库函数 #include<stdio.h> #include <iostream> #include<string> using namespace std;int main() {int q;//第一行输入一个正整数q&#xff0c;表示操作次数string content;//第二行输入一…...

运动规划实战案例 | 图解基于状态晶格(State Lattice)的路径规划(附ROS C++/Python仿真)

目录 1 控制采样 vs 状态采样2 State Lattice路径规划2.1 算法流程2.2 Lattice运动基元生成2.3 几何代价函数2.4 运动学约束启发式 3 算法仿真3.1 ROS C仿真3.2 Python仿真 1 控制采样 vs 状态采样 控制采样的技术路线源自经典的运动学建模思想。这种方法将机器人的控制指令空…...

深入浅出对抗学习:概念、攻击、防御与代码实践

深入浅出对抗学习&#xff1a;概念、攻击、防御与代码实践 近年来&#xff0c;深度学习在图像识别、自然语言处理等领域取得了巨大成功。然而&#xff0c;研究表明&#xff0c;这些看似强大的模型却异常脆弱&#xff0c;容易受到**对抗样本&#xff08;Adversarial Examples&a…...

Neo4j(二) - 使用Cypher操作Neo4j

文章目录 前言一、Cypher简介二、数据库操作1. 创建数据库2. 查看数据库3. 删除数据库4. 切换数据库 三、节点、关系及属性操作1. 创建节点与关系1.1 语法1.2 示例 2. 查询数据2.1 语法2.2 示例 3. 更新数据3.1 语法3.2 示例 4. 删除节点与关系4.1 语法4.2 示例 5. 合并数据5.1…...

09、供应商管理数字化转型:从潜在评估到战略合作的系统化方法

在全球化竞争和供应链日益复杂的商业环境下&#xff0c;供应商管理已成为企业核心竞争力的关键组成部分。优秀的供应商管理体系不仅能确保物料和服务的稳定供应&#xff0c;更能成为企业创新、降本增效的战略资源。本文将系统性地介绍供应商管理的完整框架&#xff0c;从潜在供…...

AI时代新词-AI增强现实(AI - Enhanced Reality)

一、什么是AI增强现实&#xff08;AI - Enhanced Reality&#xff09;&#xff1f; AI增强现实&#xff08;AI - Enhanced Reality&#xff09;是指将人工智能&#xff08;AI&#xff09;技术与增强现实&#xff08;Augmented Reality&#xff0c;简称AR&#xff09;技术相结合…...

批量转存夸克网盘内容并分享实操教程

批量转存夸克网盘内容并分享 经常使用我AI工具&#xff08;圈友互联AI&#xff09;的应该在每日资源这里看到&#xff0c;会每天自动更新最新资源信息&#xff0c;这些资源是自动从各处爬取出来再批量转存进行分享处理的&#xff01; 今天就和大家分享下&#xff0c;如何对夸克…...