MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。
1. 什么是MVCC?
定义
MVCC是一种数据库技术,用于通过保留数据的多个版本来提高并发性能,同时避免事务之间的冲突。简单来说,它允许数据库在读取和写入操作时,同时存在多个版本的数据,而不是直接修改原始数据。
举个例子
想象一下,你有一本书,书中的内容是“今天天气很好”。现在,你的朋友想在书上写“今天天气很好,适合出去玩”,但他不想直接在你的书上修改,而是想保留原来的版本。于是,他拿了一张纸,在上面写上新的内容,并标注这是第2个版本。这样,你的原始版本和新的版本都可以保留下来。这就是MVCC的基本思想。
2. MVCC的工作原理
核心思想
MVCC的核心思想是:每次修改数据时,不直接覆盖原始数据,而是创建一个新的版本。这样,旧版本的数据仍然可以被其他事务访问,而不会被新的修改影响。
如何实现?
-
版本号:每次修改数据时,系统会为新版本分配一个唯一的版本号(通常是时间戳或递增的数字)。
-
快照读:当一个事务读取数据时,它会看到一个“快照”——即在事务开始时数据库的状态。这个快照是通过版本号来确定的。
-
写操作:当一个事务修改数据时,它会创建一个新的版本,并标记这个版本的版本号。旧版本的数据仍然保留,直到没有事务需要它为止。
举个例子
假设数据库中有以下记录:
复制
ID | Name | Version
1 | Alice | 1
现在,事务A读取了这条记录,看到的版本是1。与此同时,事务B修改了这条记录,将Name
改为Bob
。此时,数据库会创建一个新的版本:
复制
ID | Name | Version
1 | Alice | 1
1 | Bob | 2
事务A仍然可以看到Alice
(版本1),而事务B可以看到Bob
(版本2)。当事务A完成时,数据库会清理掉旧版本的数据,但事务B仍然可以看到新版本。
3. MVCC的优势
提高并发性能
-
读操作不阻塞写操作:由于读操作访问的是数据的旧版本,写操作不会影响读操作,从而减少了锁的使用。
-
写操作不阻塞读操作:即使有写操作正在进行,读操作仍然可以访问旧版本的数据,而不会被阻塞。
避免锁冲突
-
减少锁的使用:MVCC通过版本控制减少了对锁的需求,从而降低了锁冲突的可能性。
-
提高事务吞吐量:由于减少了锁的使用,事务可以更快地完成,提高了系统的整体吞吐量。
4. MVCC的实现细节
版本号
-
版本号的作用:每个版本的数据都有一个唯一的版本号,用于标识数据的创建时间和顺序。
-
如何使用版本号:当事务读取数据时,它会根据自己的开始时间选择一个合适的版本号,从而看到一个一致的快照。
快照读
-
快照的概念:事务开始时,数据库会创建一个快照,记录当前所有版本的数据。
-
如何读取快照:事务读取数据时,会根据快照中的版本号选择数据,而不是直接读取最新的数据。
垃圾回收
-
旧版本的清理:随着时间推移,旧版本的数据可能会堆积。数据库需要定期清理这些旧版本,以节省空间。
-
清理条件:只有当没有事务需要旧版本时,数据库才会清理这些版本。
5. MVCC的应用场景
数据库系统
-
MySQL:MySQL的InnoDB存储引擎使用MVCC来实现事务的隔离级别,如
READ COMMITTED
和REPEATABLE READ
。 -
PostgreSQL:PostgreSQL也使用MVCC来管理事务并发,支持高并发的读写操作。
-
SQLite:SQLite在某些模式下也支持MVCC,用于提高并发性能。
分布式系统
-
Cassandra:Cassandra使用MVCC来处理分布式环境下的并发读写操作。
-
其他NoSQL数据库:许多NoSQL数据库也借鉴了MVCC的思想,以提高系统的并发性能。
6. MySQL中的实现
-
版本链与Undo日志:每次修改数据时,旧版本数据会被保存在Undo日志中,新版本数据则附加到版本链上。
-
ReadView:事务启动时创建的快照视图,用于确定哪些数据版本对当前事务可见。
-
快照读与当前读:快照读基于ReadView读取历史版本数据,而当前读则读取最新版本数据并加锁。
1 锁机制
MySQL中与MVCC配合的锁机制主要包括以下几种:
1.1 共享锁(S锁)与排他锁(X锁)
-
共享锁:适用于读操作,允许多个事务同时读取同一数据,但阻止其他事务对该数据加排他锁。
-
排他锁:用于写操作(如
UPDATE
、DELETE
),确保事务独占数据行,其他事务无法对该数据行加任何锁。
在READ COMMITTED
隔离级别下,读操作不加锁,写操作加排他锁。而在REPEATABLE READ
隔离级别下,读操作使用快照读,写操作加排他锁。
1.2 间隙锁(Gap Lock)与临键锁(Next-Key Lock)
-
间隙锁:锁定索引记录之间的“间隙”,防止其他事务在这些间隙中插入新记录,从而避免幻读。
-
临键锁:是记录锁和间隙锁的组合,锁定记录本身及其前后的间隙,常用于
REPEATABLE READ
隔离级别。
1.3 意向锁(Intention Locks)
意向锁用于表级锁定,表明事务对表中某些行的锁定意图。虽然意向锁本身不直接参与MVCC,但它可以帮助优化锁的管理。
2. MVCC与锁机制的配合
-
在
READ COMMITTED
隔离级别下,MVCC通过快照读实现非阻塞读取,而写操作加排他锁。 -
在
REPEATABLE READ
隔离级别下,MVCC结合ReadView和临键锁,确保事务内多次读取结果一致,同时防止幻读。 -
在
SERIALIZABLE
隔离级别下,MVCC几乎不发挥作用,所有读写操作都通过严格的锁机制实现串行化。
3 总结
MySQL的MVCC机制通过版本链、Undo日志和ReadView实现高效的并发读取,而锁机制(如共享锁、排他锁、间隙锁和临键锁)则用于控制写操作和防止幻读。不同的事务隔离级别决定了MVCC与锁机制的具体配合方式。
相关文章:
MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。 1. 什么是…...

React 与 Vue 对比指南 - 上
React 与 Vue 对比指南 - 上 本文将展示如何在 React 和 Vue 中实现常见功能,从基础渲染到高级状态管理 Hello 分别使用 react 和 vue 写一个 Hello World! react export default () > {return <div>Hello World!</div>; }vue <…...

开源协议深度解析:理解MIT、GPL、Apache等常见许可证
目录 前言1. MIT协议:自由而宽松的开源许可1.1 MIT协议的主要特点1.2 MIT协议的适用场景 2. GPL协议:自由软件的捍卫者2.1 GPL协议的核心理念2.2 GPL协议的适用场景 3. Apache License 2.0:开源与专利保护的平衡3.1 Apache License 2.0的主要…...

通用评估系统(五)- 前端部分总体说明
通用评估系统(五)- 前端部分总体说明 相关链接 Gitee地址通用评估系统(一)- 介绍通用评估系统(二)- 原型设计通用评估系统(三)- 前端部分通用评估系统(四)-…...

STM32GPIO
目录 GPIO基本结构GPIO位结构输入部分输出部分 输出模式GPIO模式浮空/上拉/下拉模拟输入开漏和推挽复用开漏/复用推挽 GPIO基本结构 GPIO是挂载在APB2总线上的外设。GPIO结构中的寄存器分为输入寄存器和输出寄存器,APB2总线通过输出寄存器向引脚发送数据,…...
MyBatis拦截器终极指南:从原理到企业级实战
在本篇文章中,我们将深入了解如何编写一个 MyBatis 拦截器,并通过一个示例来展示如何在执行数据库操作(如插入或更新)时,自动填充某些字段(例如 createdBy 和 updatedBy)信息。本文将详细讲解拦…...

SpringBoot启动失败之application.yml缩进没写好
修改前: spring前面空格了 报错输出:Failed to configure a DataSource: ‘url’ attribute is not specified and no embedded datasource could be configured. Reason: Failed to determine a suitable driver class Action: Consider the follow…...
【JavaScript】《JavaScript高级程序设计 (第4版) 》笔记-Chapter17-事件
十七、事件 事件 JavaScript 与 HTML 的交互是通过事件实现的,事件代表文档或浏览器窗口中某个有意义的时刻。可以使用仅在事件发生时执行的监听器(也叫处理程序)订阅事件。在传统软件工程领域,这个模型叫“观察者模式”ÿ…...

鸿蒙开发:V2版本装饰器之@Monitor装饰器
前言 本文代码案例基于Api13。 随着官方的迭代,在新的Api中,对于新的应用开发,官方已经建议直接使用V2所属的装饰器进行开发了,所以,能上手V2的尽量上手V2吧,毕竟,V2是V1的增强版本,…...

51单片机-外部中断
以外部中断0为例: 主程序中需要有以下代码: EA1; //打开总中断开关 EX01; //开外部中断0 IT00/1; 设置外部中断的触发方式 P3.2\P3.3为外部中断接口,通过控制P3.2口按键按下实现LED灯反转点亮 #include "reg52.h"typed…...

UE C++ UObject 功能的初步总结(结合官方文档)
一. Uboject的官方文档的个人理解 Objects in Unreal Engine | 虚幻引擎 5.5 文档 | Epic Developer Community 目录在此 1.垃圾回收:上篇文章简单介绍过,UObject的创建和回收。本身是很复杂的功能,后续会接着单项深入分析。 2.引用更新 1. 反射:之前…...
DeepSeek和ChatGPT的全面对比
一、模型基础架构对比(2023技术版本) 维度DeepSeekChatGPT模型家族LLAMA架构改进GPT-4优化版本参数量级开放7B/35B/120B闭源175B位置编码RoPE NTK扩展ALiBiAttention机制FlashAttention-3FlashAttention-2激活函数SwiGLU ProGeGLU训练框架DeepSpeedMeg…...
Spring Boot Actuator 监控✨
Spring Boot Actuator 是 Spring Boot 提供的一个强大的监控和管理工具,它可以帮助你深入了解和监控你的应用程序的运行状态。通过 Actuator,你可以获取应用程序的健康状况、内存使用情况、线程信息、HTTP 请求跟踪等。🚀 核心知识点 &#…...
构建高效 Python Web 应用:框架与服务器的选择及实践
构建高效 Python Web 应用:框架与服务器的选择及实践 flyfish 从选择合适的 Web 框架(如 Flask 和 FastAPI)到部署时选用适当的 Web 服务器(如 Waitress、Gunicorn、uWSGI 和 Uvicorn)的全过程。它不仅介绍了各个框架…...

LED灯闪烁实验:Simulink应用层开发
文章目录 1 阶段目标2 开发过程2.1 模型搭建2.2 模型仿真2.3 数据字典配置2.4 代码生成3 总结1 阶段目标 本文是《LED灯闪烁实验》的第三部分,会通过图文结合的方式,手把手带读者操作Simulink工具进行LED灯闪烁的应用层开发。 本章的开发可分解为如下若干过程: 方波输出建…...

在做题中学习(89):螺旋矩阵
解法:模拟 思路:创建ret数组,用变量标记原矩阵的行数和列数,遍历一个元素就push_back进ret数组,每次遍历完一行或一列,相应行/列数--,进行顺时针螺旋遍历到为0即可。 细节:要有边界…...
使用EasyExcel和多线程实现高效数据导出
使用EasyExcel和多线程实现高效数据导出 1. 概述 在企业级应用中,数据导出是一个常见的需求。为了提高导出效率,尤其是在处理大量数据时,我们可以结合使用EasyExcel库和多线程技术。本文将详细介绍如何通过EasyExcel和多线程技术实现高…...

rabbitmq五种模式的实现——springboot
rabbitmq五种模式的实现——springboot 基础知识和javase的实现形式可以看我之前的博客 代码地址:https://github.com/9lucifer/rabbitmq4j-learning 一、进行集成 (一)Spring Boot 集成 RabbitMQ 概述 Spring Boot 提供了对 RabbitMQ 的自…...
每日学习Java之一万个为什么
9.Class <?> class1 Myclass.class 为什么要有通配符?传给谁用的? 首先,这里的class特指某个对象在JVM中的元数据集合。 有普通、接口、数组、基本类型、 void 类型、局部类、匿名类、枚举、注解 1.类型安全:通配符允许…...
寒假学习总结
整个寒假都走在数据结构与算法的路上,深入学习了其中多个板块,刷了一些与之对应的题目,下面来一期总结(c) (emmm,主播在寒假试着去学习了几大语言的语法基础(丢丢) 如Ja…...

.Net框架,除了EF还有很多很多......
文章目录 1. 引言2. Dapper2.1 概述与设计原理2.2 核心功能与代码示例基本查询多映射查询存储过程调用 2.3 性能优化原理2.4 适用场景 3. NHibernate3.1 概述与架构设计3.2 映射配置示例Fluent映射XML映射 3.3 查询示例HQL查询Criteria APILINQ提供程序 3.4 高级特性3.5 适用场…...

SpringCloudGateway 自定义局部过滤器
场景: 将所有请求转化为同一路径请求(方便穿网配置)在请求头内标识原来路径,然后在将请求分发给不同服务 AllToOneGatewayFilterFactory import lombok.Getter; import lombok.Setter; import lombok.extern.slf4j.Slf4j; impor…...
Android Bitmap治理全解析:从加载优化到泄漏防控的全生命周期管理
引言 Bitmap(位图)是Android应用内存占用的“头号杀手”。一张1080P(1920x1080)的图片以ARGB_8888格式加载时,内存占用高达8MB(192010804字节)。据统计,超过60%的应用OOM崩溃与Bitm…...

Android 之 kotlin 语言学习笔记三(Kotlin-Java 互操作)
参考官方文档:https://developer.android.google.cn/kotlin/interop?hlzh-cn 一、Java(供 Kotlin 使用) 1、不得使用硬关键字 不要使用 Kotlin 的任何硬关键字作为方法的名称 或字段。允许使用 Kotlin 的软关键字、修饰符关键字和特殊标识…...

【数据分析】R版IntelliGenes用于生物标志物发现的可解释机器学习
禁止商业或二改转载,仅供自学使用,侵权必究,如需截取部分内容请后台联系作者! 文章目录 介绍流程步骤1. 输入数据2. 特征选择3. 模型训练4. I-Genes 评分计算5. 输出结果 IntelliGenesR 安装包1. 特征选择2. 模型训练和评估3. I-Genes 评分计…...
蓝桥杯 冶炼金属
原题目链接 🔧 冶炼金属转换率推测题解 📜 原题描述 小蓝有一个神奇的炉子用于将普通金属 O O O 冶炼成为一种特殊金属 X X X。这个炉子有一个属性叫转换率 V V V,是一个正整数,表示每 V V V 个普通金属 O O O 可以冶炼出 …...
Mysql8 忘记密码重置,以及问题解决
1.使用免密登录 找到配置MySQL文件,我的文件路径是/etc/mysql/my.cnf,有的人的是/etc/mysql/mysql.cnf 在里最后加入 skip-grant-tables重启MySQL服务 service mysql restartShutting down MySQL… SUCCESS! Starting MySQL… SUCCESS! 重启成功 2.登…...

android13 app的触摸问题定位分析流程
一、知识点 一般来说,触摸问题都是app层面出问题,我们可以在ViewRootImpl.java添加log的方式定位;如果是touchableRegion的计算问题,就会相对比较麻烦了,需要通过adb shell dumpsys input > input.log指令,且通过打印堆栈的方式,逐步定位问题,并找到修改方案。 问题…...
MinIO Docker 部署:仅开放一个端口
MinIO Docker 部署:仅开放一个端口 在实际的服务器部署中,出于安全和管理的考虑,我们可能只能开放一个端口。MinIO 是一个高性能的对象存储服务,支持 Docker 部署,但默认情况下它需要两个端口:一个是 API 端口(用于存储和访问数据),另一个是控制台端口(用于管理界面…...

ubuntu系统文件误删(/lib/x86_64-linux-gnu/libc.so.6)修复方案 [成功解决]
报错信息:libc.so.6: cannot open shared object file: No such file or directory: #ls, ln, sudo...命令都不能用 error while loading shared libraries: libc.so.6: cannot open shared object file: No such file or directory重启后报错信息&…...