MySQL的binlog原理和它的几种使用方法
MySQL中的二进制日志(binlog)是一种用于记录数据库操作的日志文件,它可以记录MySQL服务器接收到的所有修改数据库的语句,例如INSERT、UPDATE和DELETE等语句。二进制日志对于备份和恢复数据库、复制数据库和进行数据分析等操作非常有用。
二进制日志的原理
MySQL的二进制日志包含了对数据库执行的所有修改操作,它以二进制格式记录了所有的数据变化。每个日志文件都包含了一系列的事件(event),每个事件都对应着一个执行的SQL语句或一个对数据的修改操作。当MySQL执行一个事务时,它会在二进制日志中写入所有修改数据的操作,而不是直接修改数据。这样做的好处是可以保证数据的安全性和完整性,并且可以用来回滚数据到特定的时间点。
MySQL的二进制日志分为三种格式:Statement、Row和Mixed。Statement格式记录了所有的SQL语句,Row格式则记录了每一行数据的变化,而Mixed格式则是根据执行的操作来决定使用哪种格式。例如,如果执行的是UPDATE语句,那么使用Row格式记录,如果执行的是SELECT语句,那么使用Statement格式记录。
MySQL的二进制日志有三种模式:
-
statement模式:以SQL语句为单位记录所有的修改操作。这种模式下,MySQL将每个修改操作转换成对应的SQL语句,并将SQL语句记录到二进制日志中。
-
row模式:以行为单位记录所有的修改操作。这种模式下,MySQL将每个修改操作转换成对应的行数据,并将行数据记录到二进制日志中。
-
mixed模式:结合了statement和row两种模式。MySQL会根据每个修改操作的类型和数据大小来选择使用哪种模式。
二进制日志的使用方法
MySQL的二进制日志在实际的生产环境中具有非常重要的作用,它可以用于多种场景,下面列举了几种常见的使用方法。
- 数据库备份和恢复
二进制日志可以用于MySQL数据库的备份和恢复。在备份数据库时,我们可以通过备份二进制日志来恢复数据库到指定的时间点,这可以保证数据的安全性和完整性。例如,我们可以通过备份当前的数据库,然后在备份后继续执行一些操作,最后再备份一次二进制日志,这样可以得到一个完整的数据库备份,同时也可以恢复到任意一个时间点的数据库状态。
- 数据库复制
二进制日志也可以用于MySQL数据库的复制,它可以使得一个MySQL服务器将所有的修改操作同步到其他的MySQL服务器。在MySQL数据库复制中,主服务器(master)会将它接收到的所有修改操作记录到二进制日志中,然后将日志文件发送给从服务器(slave),从服务器会将接收到的二进制日志应用到自己的数据库中,从而实现了主从服务器的数据同步。通过使用二进制日志,我们可以保证从服务器的数据和主服务器的数据保持一致。
- 数据恢复
二进制日志还可以用于MySQL数据恢复。如果在数据库出现问题时,我们可以通过恢复二进制日志来还原数据库。例如,我们可以通过备份当前的数据库,然后继续执行一些操作,最后再备份一次二进制日志,当数据库出现故障时,我们可以使用备份的数据和二进制日志来恢复数据库到指定的时间点。
- 数据审计和分析
二进制日志还可以用于MySQL的数据审计和分析。通过分析二进制日志,我们可以得到用户对数据库的操作记录,包括执行的SQL语句、时间戳和执行用户等信息。这对于对数据库操作进行审计和跟踪非常有用。
使用二进制日志的步骤
使用MySQL的二进制日志需要经过以下几个步骤:
- 启用二进制日志功能
要使用MySQL的二进制日志,需要先启用该功能。可以通过在my.cnf配置文件中设置以下参数来启用二进制日志功能:log-bin=mysql-bin
这样,MySQL就会将所有的修改操作记录到二进制日志文件中。
- 备份二进制日志文件
备份MySQL的二进制日志文件是非常重要的,可以在数据库出现故障时恢复数据。可以使用以下命令来备份二进制日志文件:mysqlbinlog --read-from-remote-server --host=<hostname> --user=<username> --password=<password> mysql-bin.000001 > /backup/mysql-bin.000001
该命令将mysql-bin.000001备份到/backup/mysql-bin.000001文件中。
- 恢复二进制日志文件
当MySQL出现故障时,可以通过备份的二进制日志文件来恢复数据。可以使用以下命令来恢复二进制日志文件:mysqlbinlog /backup/mysql-bin.000001 | mysql -h <hostname> -u <username> -p<password> mysql
该命令将/backup/mysql-bin.000001文件中的日志恢复到数据库中。
MySQL的二进制日志的压缩和清理
- 二进制日志的压缩
二进制日志文件可能会非常大,这会导致备份和恢复的时间变长。为了解决这个问题,MySQL提供了二进制日志的压缩功能。可以使用以下命令来压缩二进制日志文件:
mysqlbinlog --read-from-remote-server --host=<hostname> --user=<username> --password=<password> mysql-bin.000001 | gzip > mysql-bin.000001.gz
该命令将mysql-bin.000001压缩为mysql-bin.000001.gz文件。
- 二进制日志的过期清理
MySQL的二进制日志文件可能会占用大量的磁盘空间,为了避免磁盘空间不足,需要定期进行清理。可以通过设置expire_logs_days参数来控制二进制日志文件的过期时间。例如,如果将expire_logs_days设置为7,则MySQL会自动删除7天前的二进制日志文件。可以使用以下命令来设置expire_logs_days参数:
SET GLOBAL expire_logs_days=7;
总结:
MySQL的二进制日志是一种非常有用的功能,它可以用于数据库备份和恢复、数据库复制、数据恢复和数据审计和分析等场景。在使用二进制日志时,需要了解其原理和使用方法,并根据实际情况选择合适的备份和恢复策略。通过合理使用二进制日志,可以保证MySQL数据库的数据安全性和完整性,提高数据的可靠性和可用性。
相关文章:
MySQL的binlog原理和它的几种使用方法
MySQL中的二进制日志(binlog)是一种用于记录数据库操作的日志文件,它可以记录MySQL服务器接收到的所有修改数据库的语句,例如INSERT、UPDATE和DELETE等语句。二进制日志对于备份和恢复数据库、复制数据库和进行数据分析等操作非常…...
40岁以上的程序员还容易找到工作吗?聊聊我自己的亲身经历
今天我们来讨论一个比较热门的话题,那就是程序员。如果到了40岁以上还容易找到工作吗?这个问题呢,其实是一个非常现实的问题,也是我们程序员非常关心的一个问题。因为我们每一个程序员,他都会有到40岁的那一天。 首先…...
Class类
package com.hspedu.reflection.class_;import com.hspedu.Cat;import java.util.ArrayList;/*** author 韩顺平* version 1.0* 对Class类特点的梳理*/ public class Class01 {public static void main(String[] args) throws ClassNotFoundException {//看看Class类图//1. Cla…...
Python小姿势 - 可选知识点:
可选知识点: 列表推导式 列表和字典推导式 字典推导式 生成器表达式 带条件的生成器表达式 解析XML 解析JSON 使用Requests和BeautifulSoup爬虫 Python并发编程 Python多线程编程 Python多进程编程 Python异步编程 Python装饰器 Python闭包 Python模块化 Python类和…...
Javaee Spring的AOP简介
一.Spring的AOP简介 1.1 什么是AOP AOP 为 Aspect Oriented Programming 的缩写,意思为面向切面编程,是通过预编译方式和运行期动态代 理实现程序功能的统一维护的一种技术。AOP 是 OOP 的延续,是软件开发中的一个热点,也是…...
基于ansible初始化linux服务器基础环境。
大家好,今天我要和大家分享一个关于搭建centos环境的新方法。 以前我们经常会看到一些文章介绍如何搭建centos环境,但很多时候都会出现一些问题。不过现在有了一种新的方法,就是使用ansible脚本来实现。 虽然这种方法仅适用于centos7&#…...
leetcode-数据库题
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 175. 组合两个表176. 第二高的薪水177. 第N高的薪水178. 分数排名181. 超过经理收入的员工182. 查找重复的电子邮箱183. 从不订购的客户 175. 组合两个表 select p…...
[元来学NVMe协议] NVMe IO 指令集(NVM 指令集)| Flush 命令
声明 主页:元存储的博客_CSDN博客 依公开知识及经验整理,如有误请留言。 个人辛苦整理,付费内容,禁止转载。 内容摘要 前言 NVMe2.0 定义的三类命令集: 管理命令集、IO命令集、Fabrics命令集 Admin Command Set (管理命令集):用于控制器的管理,如创建/销毁IO提交队列…...
信息的相关性和冗余度:信息在整个文明中的作用
文章目录 I 古埃及的象形文字1.1 罗塞塔石碑1.2 古埃及文字音节和希腊字母的对应表1.3 破解古埃及文字 I 古埃及的象形文字 1.1 罗塞塔石碑 这个石碑是在公元前196年埃及国王托勒密五世加冕一周年的诏书。 在此前大约一百年,埃及已经被来自希腊北方城邦的亚历山大…...
python数据结构与算法-动态规划(最长公共子序列)
一、最长公共子序列问题 1、问题概念 一个序列的子序列是在该序列中删去若干元素后得 到的序列。 例如:"ABCD”和“BDF”都是“ABCDEFG”的子序列。 最长公共子序列(LCS) 问题: 给定两个序列X和Y,求X和Y长度最大的公共子字列。 例:X"ABBCBDE”…...
Java版企业电子招投标系统源码 Spring Cloud+Spring Boot 电子招标采购系统功能清单
一、立项管理 1、招标立项申请 功能点:招标类项目立项申请入口,用户可以保存为草稿,提交。 2、非招标立项申请 功能点:非招标立项申请入口、用户可以保存为草稿、提交。 3、采购立项列表 功能点:对草稿进行编辑&#x…...
【c语言】函数的基本概念 | 函数堆栈调用原理
创作不易,本篇文章如果帮助到了你,还请点赞支持一下♡>𖥦<)!! 主页专栏有更多知识,如有疑问欢迎大家指正讨论,共同进步! 给大家跳段街舞感谢支持!ጿ ኈ ቼ ዽ ጿ ኈ ቼ ዽ ጿ ኈ ቼ ዽ ጿ…...
Vue.prototype 详解及使用
前言: 我们可能会在很多组件里用到数据/实用工具,但是不想污染全局作用域。这种情况下,可以通过在原型上定义它们使其在每个 Vue 的实例中可用。 1. 基本示例 在main.js中添加一个变量到 Vue.prototype Vue.prototype.$appName My App这…...
音视频八股文(3)--ffmpeg常见命令(2)
07-ffplay命令播放媒体 播放本地文件 播放本地 MP4 视频文件 test.mp4 的命令,从第 2 秒位置开始播放,播放时长为 10 秒,并且在窗口标题中显示 “test time”: ffplay -window_title "test time" -ss 2 -t 10 -autoe…...
使用bert4keras出现的问题(Process finished with exit code -1073741819 (0xC0000005))
1、环境 python 3.7.12 tensorflow 1.15 keras 2.3.1 bert4keras 0.9.7 protobuf 3.19.0 numpy 1.16.5 2、出现问题 numpy版本不兼容问题所以你就直接按照我的版本就可以了(numpy 1.16.5) Process finished with exit code -1073741819 (0xC0000005) …...
python协程实战
协程简介 协程(Coroutine)又称微线程、纤程,协程不是进程或线程,其执行过程类似于 Python 函数调用,Python 的 asyncio 模块实现的异步IO编程框架中,协程是对使用 async 关键字定义的异步函数的调用; 一个进程包含多个线程,类似…...
【论文笔记】VideoGPT: Video Generation using VQ-VAE and Transformers
论文标题:VideoGPT: Video Generation using VQ-VAE and Transformers 论文代码:https://wilson1yan. github.io/videogpt/index.html. 论文链接:https://arxiv.org/abs/2104.10157 发表时间: 2021年9月 Abstract 作者提出了…...
scala之基础面向对象
scala 既是面向对象 也是函数式编程 从Java 发展而来,依赖JVM环境 一、 scala 在linux中运行 scala 模式中直接编写运行 scala文件,load执行 scala编译程序 编译 运行 scala java 二、scala 数据类型 基础数据类型 val 不可变变量 函数式编程 …...
Qt5.12实战之多线程编程概念
1.为什么要使用多线程? a. 基于线程,同时处理多个任务,软件响应更灵敏 b.充分利用CPU的多核心功能增加应用运行效率 c.多线程在同一进程间使用共享通信更加高效 d.多个线程之间进行切换比多个进程之间进行切换,线程开销更少. 2.操作系统与进程关系 a. MS-DOS系统 属于单进程…...
格式化数据恢复怎么做?超实用的3种方法在这!
案例:格式化数据怎么恢复 【我的电脑前段时间中病毒了,无奈之下我只能将其格式化,但是很多重要的文件和图片之类的也一起被删除了,有什么方法可以恢复这些格式化的数据吗?非常着急!】 格式化数据恢复&…...
IDEA运行Tomcat出现乱码问题解决汇总
最近正值期末周,有很多同学在写期末Java web作业时,运行tomcat出现乱码问题,经过多次解决与研究,我做了如下整理: 原因: IDEA本身编码与tomcat的编码与Windows编码不同导致,Windows 系统控制台…...
2.Vue编写一个app
1.src中重要的组成 1.1main.ts // 引入createApp用于创建应用 import { createApp } from "vue"; // 引用App根组件 import App from ./App.vue;createApp(App).mount(#app)1.2 App.vue 其中要写三种标签 <template> <!--html--> </template>…...
Nuxt.js 中的路由配置详解
Nuxt.js 通过其内置的路由系统简化了应用的路由配置,使得开发者可以轻松地管理页面导航和 URL 结构。路由配置主要涉及页面组件的组织、动态路由的设置以及路由元信息的配置。 自动路由生成 Nuxt.js 会根据 pages 目录下的文件结构自动生成路由配置。每个文件都会对…...
鸿蒙中用HarmonyOS SDK应用服务 HarmonyOS5开发一个医院查看报告小程序
一、开发环境准备 工具安装: 下载安装DevEco Studio 4.0(支持HarmonyOS 5)配置HarmonyOS SDK 5.0确保Node.js版本≥14 项目初始化: ohpm init harmony/hospital-report-app 二、核心功能模块实现 1. 报告列表…...
uniapp微信小程序视频实时流+pc端预览方案
方案类型技术实现是否免费优点缺点适用场景延迟范围开发复杂度WebSocket图片帧定时拍照Base64传输✅ 完全免费无需服务器 纯前端实现高延迟高流量 帧率极低个人demo测试 超低频监控500ms-2s⭐⭐RTMP推流TRTC/即构SDK推流❌ 付费方案 (部分有免费额度&#x…...
服务器--宝塔命令
一、宝塔面板安装命令 ⚠️ 必须使用 root 用户 或 sudo 权限执行! sudo su - 1. CentOS 系统: yum install -y wget && wget -O install.sh http://download.bt.cn/install/install_6.0.sh && sh install.sh2. Ubuntu / Debian 系统…...
Go 语言并发编程基础:无缓冲与有缓冲通道
在上一章节中,我们了解了 Channel 的基本用法。本章将重点分析 Go 中通道的两种类型 —— 无缓冲通道与有缓冲通道,它们在并发编程中各具特点和应用场景。 一、通道的基本分类 类型定义形式特点无缓冲通道make(chan T)发送和接收都必须准备好࿰…...
处理vxe-table 表尾数据是单独一个接口,表格tableData数据更新后,需要点击两下,表尾才是正确的
修改bug思路: 分别把 tabledata 和 表尾相关数据 console.log() 发现 更新数据先后顺序不对 settimeout延迟查询表格接口 ——测试可行 升级↑:async await 等接口返回后再开始下一个接口查询 ________________________________________________________…...
比较数据迁移后MySQL数据库和OceanBase数据仓库中的表
设计一个MySQL数据库和OceanBase数据仓库的表数据比较的详细程序流程,两张表是相同的结构,都有整型主键id字段,需要每次从数据库分批取得2000条数据,用于比较,比较操作的同时可以再取2000条数据,等上一次比较完成之后,开始比较,直到比较完所有的数据。比较操作需要比较…...
Caliper 配置文件解析:fisco-bcos.json
config.yaml 文件 config.yaml 是 Caliper 的主配置文件,通常包含以下内容: test:name: fisco-bcos-test # 测试名称description: Performance test of FISCO-BCOS # 测试描述workers:type: local # 工作进程类型number: 5 # 工作进程数量monitor:type: - docker- pro…...
