如何备份和恢复数据库
目录
- 1.xtrabackup 是什么
- 2.全量备份
- 3.增量备份
- 4.使用备份进行恢复
- 5.原理
- 6.参考
本文主要介绍如何使用xtrabackup 进行数据库的备份和恢复,并在最后介绍了原理。
1.xtrabackup 是什么
XtraBackup是由Percona开发的一款开源的MySQL数据库备份工具。它可以对InnoDB和XtraDB存储引擎的数据库进行热备份,即在数据库运行的过程中进行备份,不需要停止数据库服务。
XtraBackup的主要特点包括:
- 热备份:XtraBackup可以在数据库运行的过程中进行备份,不需要停止数据库服务。
- 支持全备和增量备份:XtraBackup既可以进行全备份,也可以进行增量备份,只备份上次备份以后修改的数据。
- 高效:XtraBackup在备份过程中只读取需要备份的数据,不会对整个数据库进行扫描,因此备份效率高。
- 一致性备份:XtraBackup可以创建数据库的一致性快照,即使在备份过程中数据库的数据发生改变,也不会影响备份的一致性。
- 压缩和流式备份:XtraBackup支持备份数据的压缩,可以大大减少备份数据的大小。同时,XtraBackup还支持流式备份,可以将备份数据直接传输到其他服务器或云存储,不需要在本地存储备份数据。
- 恢复灵活:XtraBackup备份的数据可以恢复到任何MySQL或MariaDB服务器,恢复过程简单快速。
2.全量备份
使用XtraBackup进行全量备份的基本步骤如下:
(1) 安装XtraBackup:
根据你的操作系统类型,从Percona官方网站下载并安装XtraBackup。
(2) 创建备份目录:
创建一个用于存储备份文件的目录,例如/data/backup/。
(3) 运行备份命令:
使用xtrabackup命令运行全量备份。例如,运行以下命令进行全量备份:
xtrabackup --backup --target-dir=/data/backup/ --user=root --password=123456
其中,–user和–password是MySQL数据库的用户名和密码,–target-dir是备份目录的路径。
(4) 等待备份完成:
备份过程可能需要一些时间,具体时间取决于数据库的大小和性能。
(5) 准备备份数据:
备份完成后,需要对备份数据进行准备,使其可以用于恢复。运行以下命令:xtrabackup --prepare --target-dir=/data/backup/
(6) 备份完成:
此时在/data/backup/目录下的文件就是全量备份好的数据,可以将其复制到其他位置进行存储或传输。
以上是一个全量备份的基本示例,具体的备份命令和选项可以根据实际需求进行调整。在备份过程中,还可以使用其他选项来控制备份的行为,例如压缩、增量备份等。
3.增量备份
使用XtraBackup进行增量备份的基本步骤如下:
- 首先,你需要进行一次全量备份,这将作为增量备份的基础。全量备份的步骤可以参考前面的回答。
- 其次,创建增量备份目录:创建一个用于存储增量备份文件的目录,例如/data/incremental_backup/。
- 运行增量备份命令:使用xtrabackup命令运行增量备份。例如,运行以下命令进行增量备份:
xtrabackup --backup --target-dir=/data/incremental_backup/ --incremental-basedir=/data/backup/ --user=root --password=123456其中,–user和–password是MySQL数据库的用户名和密码,–target-dir是增量备份目录的路径,--incremental-basedir是全量备份目录的路径。 - 等待增量备份完成:增量备份过程可能需要一些时间,具体时间取决于数据库的大小和性能。
- 备份完成:此时在/data/incremental_backup/目录下的文件就是增量备份好的数据,可以将其复制到其他位置进行存储或传输。
4.使用备份进行恢复
使用XtraBackup基于增量备份进行数据恢复的基本步骤如下:
(1) 停止MySQL服务:
在恢复数据前,需要先停止MySQL服务。service mysql stop
(2) 移除旧的数据目录:
备份数据将恢复到MySQL的数据目录,因此需要先移除旧的数据目录。例如,如果数据目录是/var/lib/mysql/,可以运行以下命令移除旧的数据目录:rm -rf /var/lib/mysql/*
注意,这将删除所有旧的数据,如果你需要保留旧的数据,请先进行备份。
(3) 准备全量备份数据:
首先需要对全量备份数据进行准备。
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/
其中,–target-dir是全量备份目录的路径。
(4) 准备增量备份数据:
然后需要对增量备份数据进行准备。
xtrabackup --prepare --apply-log-only --target-dir=/data/backup/ --incremental-dir=/data/incremental_backup/
其中,–target-dir是全量备份目录的路径,–incremental-dir是增量备份目录的路径。
(5) 运行恢复命令:
使用xtrabackup命令运行数据恢复。
xtrabackup --copy-back --target-dir=/data/backup/
其中,–target-dir是全量备份目录的路径。
(6) 修改数据目录的所有权:
恢复完成后,需要修改数据目录的所有权,使其与MySQL的运行用户和用户组一致。
例如,如果MySQL的运行用户和用户组都是mysql,可以运行以下命令修改数据目录的所有权:chown -R mysql:mysql /var/lib/mysql/
(7) 启动MySQL服务:
数据恢复完成后,可以启动MySQL服务。
service mysql start
5.原理
XtraBackup是一款开源的MySQL数据库备份工具,它的工作原理主要基于InnoDB存储引擎的日志和数据文件的复制。
以下是XtraBackup的主要工作原理:
- 读取并复制数据文件:XtraBackup首先会读取InnoDB存储引擎的数据文件(.ibd文件),并将其复制到备份目录。在复制过程中,XtraBackup会尽可能地减少对数据库性能的影响,例如通过并行复制和压缩数据等方式。
- 记录日志位置:在开始复制数据文件时,XtraBackup会记录InnoDB存储引擎的日志文件(redo log)的位置,这个位置称为LSN(Log Sequence Number)。LSN是InnoDB存储引擎用来标识每个事务在日志文件中的位置。
- 复制日志文件:在复制数据文件完成后,XtraBackup会复制LSN位置之后的日志文件。这些日志文件包含了复制数据文件过程中可能发生的数据变更。
- 准备备份数据:在备份完成后,XtraBackup会对备份数据进行准备,使其可以用于恢复。准备过程主要是应用日志文件中的数据变更,使备份数据达到一致的状态。
顺带提下,mysqldump 也是 数据库备份常用的工具。
mysqldump是MySQL自带的一款数据备份工具,它的工作原理主要是通过执行SQL语句来获取数据库的结构和数据。
以下是mysqldump的基本工作原理:
- 获取数据库结构:mysqldump首先获取数据库的结构信息,包括表结构、索引、触发器、存储过程等。它通过执行
SHOW CREATE TABLE等SQL语句来获取这些信息,并将结果输出为创建这些对象的SQL语句。 - 获取数据:mysqldump然后获取表的数据。它通过执行
SELECT * FROM table_name等SQL语句来获取数据,并将结果输出为插入这些数据的SQL语句。 - 锁表和事务:为了保证备份的一致性,mysqldump在备份过程中会对表进行锁定或使用事务。对于MyISAM等不支持事务的存储引擎,mysqldump会使用
LOCK TABLES语句对表进行锁定;对于InnoDB等支持事务的存储引擎,mysqldump会使用START TRANSACTION语句开启一个只读事务。 - 生成备份文件:mysqldump将生成的SQL语句输出到一个文件,这个文件就是备份文件。用户可以通过执行这个文件中的SQL语句来恢复数据库。
以上是mysqldump的基本工作原理,具体的工作过程可能会根据备份的选项进行调整。例如,用户可以选择只备份数据或只备份结构,也可以选择备份单个数据库或单个表。
6.参考
XtraBackup的官方说明文档
文档详细介绍了XtraBackup的安装、配置、使用方法,以及一些高级特性和常见问题的解决方法。
相关文章:
如何备份和恢复数据库
目录 1.xtrabackup 是什么2.全量备份3.增量备份4.使用备份进行恢复5.原理6.参考 本文主要介绍如何使用xtrabackup 进行数据库的备份和恢复,并在最后介绍了原理。 1.xtrabackup 是什么 XtraBackup是由Percona开发的一款开源的MySQL数据库备份工具。它可以对InnoDB和…...
简化数据库操作:探索 Gorm 的约定优于配置原则
文章目录 使用 ID 作为主键数据库表名TableName临时指定表名列名时间戳自动填充CreatedAtUpdatedAt时间戳类型Gorm 采用约定优于配置的原则,提供了一些默认的命名规则和行为,简化开发者的操作。 使用 ID 作为主键 默认情况下,GORM 会使用 ID 作为表的主键: type User st…...
保姆级Anaconda安装教程
一.anaconda下载 建议使用清华大学开源软件镜像站进行下载,使用官网下载速度比较慢。 anaconda清华大学开源软件镜像站 : https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 一路next即可,注意添加环境变量得选项都勾上。 二.验证…...
你写过的最蠢的代码是?——后端篇
🌷🍁 博主猫头虎(🐅🐾)带您 Go to New World✨🍁 🦄 博客首页: 🐅🐾猫头虎的博客🎐《面试题大全专栏》 🦕 文章图文并茂🦖…...
快速幂
876. 快速幂求逆元 - AcWing题库 AC代码: #include <iostream> #include <cstring> #include <algorithm>using namespace std;typedef long long ll;int n;int qmi(int a,int k,int p) {int res1;while(k){if(k&1)res(ll)res*a%p;k>&…...
【题解 动态规划】 Colored Rectangles
题目描述: 分析: 乍一看我还以为是贪心! 猫 想想感觉没问题 但是局部最优并不能保证全局最优 比如这组数据 19 19 19 19 20 20 20 20如果按照贪心的做法,答案是20*20*2 但是其实答案是19*20*4 因此这道题用贪心是不对的 于是我…...
VsCode好用的扩展插件
开发插件推荐: 别名路径跳转 >> 点击引用的变量名,ctrl 点击 跳转文件Auto Rename Tag >> 修改标签前缀,后缀标签会同时修改Chinees 中文(简体)Code Runner >> 纯js文件右键点击run code即可底部终端打印file-icons-mac >> ma…...
Linux shell编程学习笔记4:修改命令行提示符格式(内容和颜色)
一、命令行提示符格式内容因shell类型而异 Linux终端命令行提示符内容格式则因shell的类型而异,例如CoreLinux默认的shell是sh,其命令行提示符为黑底白字,内容为: tcbox:/$ 其中,tc为当前用户名,box为主机…...
vue-引入使用main.js全局常量
common.js 命名什么都可以,用来定义常量的 定义了之后使用export让此暴露出去 const QRaddress http://localhost:9875export{QRaddress, } main.js //引入刚刚的js import {QRaddress} from /config/common.js挂载 Vue.prototype.$QRaddress QRaddress使用 …...
【C语言】【动态内存管理】malloc,free,calloc,realloc
1.malloc函数 void* malloc(size_t size)功能:向内存申请字节为 size大小的空间 使用时要包含头文件:<stdlib.h> 开辟成功:返回开辟好的空间初始地址的指针 开辟失败:返回空指针 NULL 使用举例: (malloc和free…...
Linux性能优化--性能工具-系统CPU
2.0.概述 本章概述了系统级的Linux性能工具。这些工具是你追踪性能问题时的第一道防线。它们能展示整个系统的性能情况和哪些部分表现不好。 1.理解系统级性能的基本指标,包括CPU的使用情况。 2.明白哪些工具可以检索这些系统级性能指标。 2.1CPU性能统计信息 为…...
Ipython和Jupyter Notebook介绍
Ipython和Jupyter Notebook介绍 Python、IPython和Jupyter Notebook是三个不同但密切相关的工具。简而言之,Python是编程语言本身,IPython是对Python的增强版本,而Jupyter Notebook是一种在Web上进行交互式计算的环境,使用IPytho…...
数列极差(c++题解)
题目描述 佳佳的老师在黑板上写了一个由 n个正整数组成的数列,要求佳佳进行如下操作:每次擦去其中的两个数a 和b ,然后在数列中加入一个数a*b1 ,如此下去直至黑板上剩下一个数为止,在所有按这种操作方式最后得到的数…...
面试题:熟悉设计模式吗?谈谈简单工厂模式和策略模式的区别
刚刚接触设计模式的时候,我相信单例模式和工厂模式应该是用的最多的,毕竟很多的底层代码几乎都用了这些模式。自从接触了一次阿里的公众号发的一次文章关于 DDD的使用 以后,就逐渐接触了策略模式。现在在项目中运用最多的也是这几种设计模式了…...
Windows + Git + TortoiseGit + Github
一、下载Git(Git For Windows) 1.1. Git下载地址:https://gitforwindows.org/ 1.2. 默认安装即可(包名:Git-2.42.0.2-64-bit.exe) 二、下载TortoiseGit 2.1.TortoiseGit下载地址:http://tortoi…...
MySQL数据库索引练习
1.学生表:Student (Sno, Sname, Ssex , Sage, Sdept) 学号,姓名,性别,年龄,所在系 Sno为主键 课程表:Course (Cno, Cname,) 课程号,课程名 Cno为主键 学生选课表:SC (Sno, Cno, Scor…...
mysql面试题10:MySQL中有哪几种锁?表级锁、行级锁、页面锁区别和联系?
该文章专注于面试,面试只要回答关键点即可,不需要对框架有非常深入的回答,如果你想应付面试,是足够了,抓住关键点 面试官:Mysql中有哪几种锁? 在MySQL中,主要有以下几种类型的锁: 共享锁(Shared Lock):也称为读锁。多个事务可以同时持有共享锁,可以读取但不能修…...
ctfshow—1024系列练习
1024 柏拉图 有点像rce远程执行,有四个按钮,分别对应四份php文件,开始搞一下。一开始,先要试探出 文件上传到哪里? 怎么读取上传的文件? 第一步:试探上传文件位置 直接用burp抓包,…...
javaWeb学生信息管理
一、引言 学生信息管理系统是基于Java Web技术开发的一个全栈应用,用于管理学生的基本信息。本系统采用Eclipse作为开发工具,Navicat用于MySQL数据库管理,运行在JDK1.8、Tomcat9.0、MySQL8.0环境下。前端采用JavaScript、jQuery、Bootstrap4…...
玩转gpgpu-sim 04记—— __cudaRegisterBinary() of gpgpu-sim 到底做了什么
官方文档: GPGPU-Sim 3.x Manual __cudaRegisterBinary(void*) 被执行到的代码逻辑如下: void** CUDARTAPI __cudaRegisterFatBinary( void *fatCubin ) { #if (CUDART_VERSION < 2010)printf("GPGPU-Sim PTX: ERROR ** this version of GPGPU…...
【JavaEE】-- HTTP
1. HTTP是什么? HTTP(全称为"超文本传输协议")是一种应用非常广泛的应用层协议,HTTP是基于TCP协议的一种应用层协议。 应用层协议:是计算机网络协议栈中最高层的协议,它定义了运行在不同主机上…...
《从零掌握MIPI CSI-2: 协议精解与FPGA摄像头开发实战》-- CSI-2 协议详细解析 (一)
CSI-2 协议详细解析 (一) 1. CSI-2层定义(CSI-2 Layer Definitions) 分层结构 :CSI-2协议分为6层: 物理层(PHY Layer) : 定义电气特性、时钟机制和传输介质(导线&#…...
Linux相关概念和易错知识点(42)(TCP的连接管理、可靠性、面临复杂网络的处理)
目录 1.TCP的连接管理机制(1)三次握手①握手过程②对握手过程的理解 (2)四次挥手(3)握手和挥手的触发(4)状态切换①挥手过程中状态的切换②握手过程中状态的切换 2.TCP的可靠性&…...
定时器任务——若依源码分析
分析util包下面的工具类schedule utils: ScheduleUtils 是若依中用于与 Quartz 框架交互的工具类,封装了定时任务的 创建、更新、暂停、删除等核心逻辑。 createScheduleJob createScheduleJob 用于将任务注册到 Quartz,先构建任务的 JobD…...
376. Wiggle Subsequence
376. Wiggle Subsequence 代码 class Solution { public:int wiggleMaxLength(vector<int>& nums) {int n nums.size();int res 1;int prediff 0;int curdiff 0;for(int i 0;i < n-1;i){curdiff nums[i1] - nums[i];if( (prediff > 0 && curdif…...
从零实现STL哈希容器:unordered_map/unordered_set封装详解
本篇文章是对C学习的STL哈希容器自主实现部分的学习分享 希望也能为你带来些帮助~ 那咱们废话不多说,直接开始吧! 一、源码结构分析 1. SGISTL30实现剖析 // hash_set核心结构 template <class Value, class HashFcn, ...> class hash_set {ty…...
uniapp微信小程序视频实时流+pc端预览方案
方案类型技术实现是否免费优点缺点适用场景延迟范围开发复杂度WebSocket图片帧定时拍照Base64传输✅ 完全免费无需服务器 纯前端实现高延迟高流量 帧率极低个人demo测试 超低频监控500ms-2s⭐⭐RTMP推流TRTC/即构SDK推流❌ 付费方案 (部分有免费额度&#x…...
项目部署到Linux上时遇到的错误(Redis,MySQL,无法正确连接,地址占用问题)
Redis无法正确连接 在运行jar包时出现了这样的错误 查询得知问题核心在于Redis连接失败,具体原因是客户端发送了密码认证请求,但Redis服务器未设置密码 1.为Redis设置密码(匹配客户端配置) 步骤: 1).修…...
JS手写代码篇----使用Promise封装AJAX请求
15、使用Promise封装AJAX请求 promise就有reject和resolve了,就不必写成功和失败的回调函数了 const BASEURL ./手写ajax/test.jsonfunction promiseAjax() {return new Promise((resolve, reject) > {const xhr new XMLHttpRequest();xhr.open("get&quo…...
【JavaSE】多线程基础学习笔记
多线程基础 -线程相关概念 程序(Program) 是为完成特定任务、用某种语言编写的一组指令的集合简单的说:就是我们写的代码 进程 进程是指运行中的程序,比如我们使用QQ,就启动了一个进程,操作系统就会为该进程分配内存…...
