MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。
1. 什么是MVCC?
定义
MVCC是一种数据库技术,用于通过保留数据的多个版本来提高并发性能,同时避免事务之间的冲突。简单来说,它允许数据库在读取和写入操作时,同时存在多个版本的数据,而不是直接修改原始数据。
举个例子
想象一下,你有一本书,书中的内容是“今天天气很好”。现在,你的朋友想在书上写“今天天气很好,适合出去玩”,但他不想直接在你的书上修改,而是想保留原来的版本。于是,他拿了一张纸,在上面写上新的内容,并标注这是第2个版本。这样,你的原始版本和新的版本都可以保留下来。这就是MVCC的基本思想。
2. MVCC的工作原理
核心思想
MVCC的核心思想是:每次修改数据时,不直接覆盖原始数据,而是创建一个新的版本。这样,旧版本的数据仍然可以被其他事务访问,而不会被新的修改影响。
如何实现?
-
版本号:每次修改数据时,系统会为新版本分配一个唯一的版本号(通常是时间戳或递增的数字)。
-
快照读:当一个事务读取数据时,它会看到一个“快照”——即在事务开始时数据库的状态。这个快照是通过版本号来确定的。
-
写操作:当一个事务修改数据时,它会创建一个新的版本,并标记这个版本的版本号。旧版本的数据仍然保留,直到没有事务需要它为止。
举个例子
假设数据库中有以下记录:
复制
ID | Name | Version
1 | Alice | 1
现在,事务A读取了这条记录,看到的版本是1。与此同时,事务B修改了这条记录,将Name改为Bob。此时,数据库会创建一个新的版本:
复制
ID | Name | Version
1 | Alice | 1
1 | Bob | 2
事务A仍然可以看到Alice(版本1),而事务B可以看到Bob(版本2)。当事务A完成时,数据库会清理掉旧版本的数据,但事务B仍然可以看到新版本。
3. MVCC的优势
提高并发性能
-
读操作不阻塞写操作:由于读操作访问的是数据的旧版本,写操作不会影响读操作,从而减少了锁的使用。
-
写操作不阻塞读操作:即使有写操作正在进行,读操作仍然可以访问旧版本的数据,而不会被阻塞。
避免锁冲突
-
减少锁的使用:MVCC通过版本控制减少了对锁的需求,从而降低了锁冲突的可能性。
-
提高事务吞吐量:由于减少了锁的使用,事务可以更快地完成,提高了系统的整体吞吐量。
4. MVCC的实现细节
版本号
-
版本号的作用:每个版本的数据都有一个唯一的版本号,用于标识数据的创建时间和顺序。
-
如何使用版本号:当事务读取数据时,它会根据自己的开始时间选择一个合适的版本号,从而看到一个一致的快照。
快照读
-
快照的概念:事务开始时,数据库会创建一个快照,记录当前所有版本的数据。
-
如何读取快照:事务读取数据时,会根据快照中的版本号选择数据,而不是直接读取最新的数据。
垃圾回收
-
旧版本的清理:随着时间推移,旧版本的数据可能会堆积。数据库需要定期清理这些旧版本,以节省空间。
-
清理条件:只有当没有事务需要旧版本时,数据库才会清理这些版本。
5. MVCC的应用场景
数据库系统
-
MySQL:MySQL的InnoDB存储引擎使用MVCC来实现事务的隔离级别,如
READ COMMITTED和REPEATABLE READ。 -
PostgreSQL:PostgreSQL也使用MVCC来管理事务并发,支持高并发的读写操作。
-
SQLite:SQLite在某些模式下也支持MVCC,用于提高并发性能。
分布式系统
-
Cassandra:Cassandra使用MVCC来处理分布式环境下的并发读写操作。
-
其他NoSQL数据库:许多NoSQL数据库也借鉴了MVCC的思想,以提高系统的并发性能。
6. MySQL中的实现
-
版本链与Undo日志:每次修改数据时,旧版本数据会被保存在Undo日志中,新版本数据则附加到版本链上。
-
ReadView:事务启动时创建的快照视图,用于确定哪些数据版本对当前事务可见。
-
快照读与当前读:快照读基于ReadView读取历史版本数据,而当前读则读取最新版本数据并加锁。
1 锁机制
MySQL中与MVCC配合的锁机制主要包括以下几种:
1.1 共享锁(S锁)与排他锁(X锁)
-
共享锁:适用于读操作,允许多个事务同时读取同一数据,但阻止其他事务对该数据加排他锁。
-
排他锁:用于写操作(如
UPDATE、DELETE),确保事务独占数据行,其他事务无法对该数据行加任何锁。
在READ COMMITTED隔离级别下,读操作不加锁,写操作加排他锁。而在REPEATABLE READ隔离级别下,读操作使用快照读,写操作加排他锁。
1.2 间隙锁(Gap Lock)与临键锁(Next-Key Lock)
-
间隙锁:锁定索引记录之间的“间隙”,防止其他事务在这些间隙中插入新记录,从而避免幻读。
-
临键锁:是记录锁和间隙锁的组合,锁定记录本身及其前后的间隙,常用于
REPEATABLE READ隔离级别。
1.3 意向锁(Intention Locks)
意向锁用于表级锁定,表明事务对表中某些行的锁定意图。虽然意向锁本身不直接参与MVCC,但它可以帮助优化锁的管理。
2. MVCC与锁机制的配合
-
在
READ COMMITTED隔离级别下,MVCC通过快照读实现非阻塞读取,而写操作加排他锁。 -
在
REPEATABLE READ隔离级别下,MVCC结合ReadView和临键锁,确保事务内多次读取结果一致,同时防止幻读。 -
在
SERIALIZABLE隔离级别下,MVCC几乎不发挥作用,所有读写操作都通过严格的锁机制实现串行化。
3 总结
MySQL的MVCC机制通过版本链、Undo日志和ReadView实现高效的并发读取,而锁机制(如共享锁、排他锁、间隙锁和临键锁)则用于控制写操作和防止幻读。不同的事务隔离级别决定了MVCC与锁机制的具体配合方式。
相关文章:
MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。 1. 什么是…...
React 与 Vue 对比指南 - 上
React 与 Vue 对比指南 - 上 本文将展示如何在 React 和 Vue 中实现常见功能,从基础渲染到高级状态管理 Hello 分别使用 react 和 vue 写一个 Hello World! react export default () > {return <div>Hello World!</div>; }vue <…...
开源协议深度解析:理解MIT、GPL、Apache等常见许可证
目录 前言1. MIT协议:自由而宽松的开源许可1.1 MIT协议的主要特点1.2 MIT协议的适用场景 2. GPL协议:自由软件的捍卫者2.1 GPL协议的核心理念2.2 GPL协议的适用场景 3. Apache License 2.0:开源与专利保护的平衡3.1 Apache License 2.0的主要…...
通用评估系统(五)- 前端部分总体说明
通用评估系统(五)- 前端部分总体说明 相关链接 Gitee地址通用评估系统(一)- 介绍通用评估系统(二)- 原型设计通用评估系统(三)- 前端部分通用评估系统(四)-…...
STM32GPIO
目录 GPIO基本结构GPIO位结构输入部分输出部分 输出模式GPIO模式浮空/上拉/下拉模拟输入开漏和推挽复用开漏/复用推挽 GPIO基本结构 GPIO是挂载在APB2总线上的外设。GPIO结构中的寄存器分为输入寄存器和输出寄存器,APB2总线通过输出寄存器向引脚发送数据,…...
MyBatis拦截器终极指南:从原理到企业级实战
在本篇文章中,我们将深入了解如何编写一个 MyBatis 拦截器,并通过一个示例来展示如何在执行数据库操作(如插入或更新)时,自动填充某些字段(例如 createdBy 和 updatedBy)信息。本文将详细讲解拦…...
SpringBoot启动失败之application.yml缩进没写好
修改前: spring前面空格了 报错输出:Failed to configure a DataSource: ‘url’ attribute is not specified and no embedded datasource could be configured. Reason: Failed to determine a suitable driver class Action: Consider the follow…...
【JavaScript】《JavaScript高级程序设计 (第4版) 》笔记-Chapter17-事件
十七、事件 事件 JavaScript 与 HTML 的交互是通过事件实现的,事件代表文档或浏览器窗口中某个有意义的时刻。可以使用仅在事件发生时执行的监听器(也叫处理程序)订阅事件。在传统软件工程领域,这个模型叫“观察者模式”ÿ…...
鸿蒙开发:V2版本装饰器之@Monitor装饰器
前言 本文代码案例基于Api13。 随着官方的迭代,在新的Api中,对于新的应用开发,官方已经建议直接使用V2所属的装饰器进行开发了,所以,能上手V2的尽量上手V2吧,毕竟,V2是V1的增强版本,…...
51单片机-外部中断
以外部中断0为例: 主程序中需要有以下代码: EA1; //打开总中断开关 EX01; //开外部中断0 IT00/1; 设置外部中断的触发方式 P3.2\P3.3为外部中断接口,通过控制P3.2口按键按下实现LED灯反转点亮 #include "reg52.h"typed…...
UE C++ UObject 功能的初步总结(结合官方文档)
一. Uboject的官方文档的个人理解 Objects in Unreal Engine | 虚幻引擎 5.5 文档 | Epic Developer Community 目录在此 1.垃圾回收:上篇文章简单介绍过,UObject的创建和回收。本身是很复杂的功能,后续会接着单项深入分析。 2.引用更新 1. 反射:之前…...
DeepSeek和ChatGPT的全面对比
一、模型基础架构对比(2023技术版本) 维度DeepSeekChatGPT模型家族LLAMA架构改进GPT-4优化版本参数量级开放7B/35B/120B闭源175B位置编码RoPE NTK扩展ALiBiAttention机制FlashAttention-3FlashAttention-2激活函数SwiGLU ProGeGLU训练框架DeepSpeedMeg…...
Spring Boot Actuator 监控✨
Spring Boot Actuator 是 Spring Boot 提供的一个强大的监控和管理工具,它可以帮助你深入了解和监控你的应用程序的运行状态。通过 Actuator,你可以获取应用程序的健康状况、内存使用情况、线程信息、HTTP 请求跟踪等。🚀 核心知识点 &#…...
构建高效 Python Web 应用:框架与服务器的选择及实践
构建高效 Python Web 应用:框架与服务器的选择及实践 flyfish 从选择合适的 Web 框架(如 Flask 和 FastAPI)到部署时选用适当的 Web 服务器(如 Waitress、Gunicorn、uWSGI 和 Uvicorn)的全过程。它不仅介绍了各个框架…...
LED灯闪烁实验:Simulink应用层开发
文章目录 1 阶段目标2 开发过程2.1 模型搭建2.2 模型仿真2.3 数据字典配置2.4 代码生成3 总结1 阶段目标 本文是《LED灯闪烁实验》的第三部分,会通过图文结合的方式,手把手带读者操作Simulink工具进行LED灯闪烁的应用层开发。 本章的开发可分解为如下若干过程: 方波输出建…...
在做题中学习(89):螺旋矩阵
解法:模拟 思路:创建ret数组,用变量标记原矩阵的行数和列数,遍历一个元素就push_back进ret数组,每次遍历完一行或一列,相应行/列数--,进行顺时针螺旋遍历到为0即可。 细节:要有边界…...
使用EasyExcel和多线程实现高效数据导出
使用EasyExcel和多线程实现高效数据导出 1. 概述 在企业级应用中,数据导出是一个常见的需求。为了提高导出效率,尤其是在处理大量数据时,我们可以结合使用EasyExcel库和多线程技术。本文将详细介绍如何通过EasyExcel和多线程技术实现高…...
rabbitmq五种模式的实现——springboot
rabbitmq五种模式的实现——springboot 基础知识和javase的实现形式可以看我之前的博客 代码地址:https://github.com/9lucifer/rabbitmq4j-learning 一、进行集成 (一)Spring Boot 集成 RabbitMQ 概述 Spring Boot 提供了对 RabbitMQ 的自…...
每日学习Java之一万个为什么
9.Class <?> class1 Myclass.class 为什么要有通配符?传给谁用的? 首先,这里的class特指某个对象在JVM中的元数据集合。 有普通、接口、数组、基本类型、 void 类型、局部类、匿名类、枚举、注解 1.类型安全:通配符允许…...
寒假学习总结
整个寒假都走在数据结构与算法的路上,深入学习了其中多个板块,刷了一些与之对应的题目,下面来一期总结(c) (emmm,主播在寒假试着去学习了几大语言的语法基础(丢丢) 如Ja…...
超短脉冲激光自聚焦效应
前言与目录 强激光引起自聚焦效应机理 超短脉冲激光在脆性材料内部加工时引起的自聚焦效应,这是一种非线性光学现象,主要涉及光学克尔效应和材料的非线性光学特性。 自聚焦效应可以产生局部的强光场,对材料产生非线性响应,可能…...
Opencv中的addweighted函数
一.addweighted函数作用 addweighted()是OpenCV库中用于图像处理的函数,主要功能是将两个输入图像(尺寸和类型相同)按照指定的权重进行加权叠加(图像融合),并添加一个标量值&#x…...
JVM垃圾回收机制全解析
Java虚拟机(JVM)中的垃圾收集器(Garbage Collector,简称GC)是用于自动管理内存的机制。它负责识别和清除不再被程序使用的对象,从而释放内存空间,避免内存泄漏和内存溢出等问题。垃圾收集器在Ja…...
STM32标准库-DMA直接存储器存取
文章目录 一、DMA1.1简介1.2存储器映像1.3DMA框图1.4DMA基本结构1.5DMA请求1.6数据宽度与对齐1.7数据转运DMA1.8ADC扫描模式DMA 二、数据转运DMA2.1接线图2.2代码2.3相关API 一、DMA 1.1简介 DMA(Direct Memory Access)直接存储器存取 DMA可以提供外设…...
[ICLR 2022]How Much Can CLIP Benefit Vision-and-Language Tasks?
论文网址:pdf 英文是纯手打的!论文原文的summarizing and paraphrasing。可能会出现难以避免的拼写错误和语法错误,若有发现欢迎评论指正!文章偏向于笔记,谨慎食用 目录 1. 心得 2. 论文逐段精读 2.1. Abstract 2…...
linux 错误码总结
1,错误码的概念与作用 在Linux系统中,错误码是系统调用或库函数在执行失败时返回的特定数值,用于指示具体的错误类型。这些错误码通过全局变量errno来存储和传递,errno由操作系统维护,保存最近一次发生的错误信息。值得注意的是,errno的值在每次系统调用或函数调用失败时…...
C# SqlSugar:依赖注入与仓储模式实践
C# SqlSugar:依赖注入与仓储模式实践 在 C# 的应用开发中,数据库操作是必不可少的环节。为了让数据访问层更加简洁、高效且易于维护,许多开发者会选择成熟的 ORM(对象关系映射)框架,SqlSugar 就是其中备受…...
是否存在路径(FIFOBB算法)
题目描述 一个具有 n 个顶点e条边的无向图,该图顶点的编号依次为0到n-1且不存在顶点与自身相连的边。请使用FIFOBB算法编写程序,确定是否存在从顶点 source到顶点 destination的路径。 输入 第一行两个整数,分别表示n 和 e 的值(1…...
让回归模型不再被异常值“带跑偏“,MSE和Cauchy损失函数在噪声数据环境下的实战对比
在机器学习的回归分析中,损失函数的选择对模型性能具有决定性影响。均方误差(MSE)作为经典的损失函数,在处理干净数据时表现优异,但在面对包含异常值的噪声数据时,其对大误差的二次惩罚机制往往导致模型参数…...
动态 Web 开发技术入门篇
一、HTTP 协议核心 1.1 HTTP 基础 协议全称 :HyperText Transfer Protocol(超文本传输协议) 默认端口 :HTTP 使用 80 端口,HTTPS 使用 443 端口。 请求方法 : GET :用于获取资源,…...
