MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。
1. 什么是MVCC?
定义
MVCC是一种数据库技术,用于通过保留数据的多个版本来提高并发性能,同时避免事务之间的冲突。简单来说,它允许数据库在读取和写入操作时,同时存在多个版本的数据,而不是直接修改原始数据。
举个例子
想象一下,你有一本书,书中的内容是“今天天气很好”。现在,你的朋友想在书上写“今天天气很好,适合出去玩”,但他不想直接在你的书上修改,而是想保留原来的版本。于是,他拿了一张纸,在上面写上新的内容,并标注这是第2个版本。这样,你的原始版本和新的版本都可以保留下来。这就是MVCC的基本思想。
2. MVCC的工作原理
核心思想
MVCC的核心思想是:每次修改数据时,不直接覆盖原始数据,而是创建一个新的版本。这样,旧版本的数据仍然可以被其他事务访问,而不会被新的修改影响。
如何实现?
-
版本号:每次修改数据时,系统会为新版本分配一个唯一的版本号(通常是时间戳或递增的数字)。
-
快照读:当一个事务读取数据时,它会看到一个“快照”——即在事务开始时数据库的状态。这个快照是通过版本号来确定的。
-
写操作:当一个事务修改数据时,它会创建一个新的版本,并标记这个版本的版本号。旧版本的数据仍然保留,直到没有事务需要它为止。
举个例子
假设数据库中有以下记录:
复制
ID | Name | Version
1 | Alice | 1
现在,事务A读取了这条记录,看到的版本是1。与此同时,事务B修改了这条记录,将Name改为Bob。此时,数据库会创建一个新的版本:
复制
ID | Name | Version
1 | Alice | 1
1 | Bob | 2
事务A仍然可以看到Alice(版本1),而事务B可以看到Bob(版本2)。当事务A完成时,数据库会清理掉旧版本的数据,但事务B仍然可以看到新版本。
3. MVCC的优势
提高并发性能
-
读操作不阻塞写操作:由于读操作访问的是数据的旧版本,写操作不会影响读操作,从而减少了锁的使用。
-
写操作不阻塞读操作:即使有写操作正在进行,读操作仍然可以访问旧版本的数据,而不会被阻塞。
避免锁冲突
-
减少锁的使用:MVCC通过版本控制减少了对锁的需求,从而降低了锁冲突的可能性。
-
提高事务吞吐量:由于减少了锁的使用,事务可以更快地完成,提高了系统的整体吞吐量。
4. MVCC的实现细节
版本号
-
版本号的作用:每个版本的数据都有一个唯一的版本号,用于标识数据的创建时间和顺序。
-
如何使用版本号:当事务读取数据时,它会根据自己的开始时间选择一个合适的版本号,从而看到一个一致的快照。
快照读
-
快照的概念:事务开始时,数据库会创建一个快照,记录当前所有版本的数据。
-
如何读取快照:事务读取数据时,会根据快照中的版本号选择数据,而不是直接读取最新的数据。
垃圾回收
-
旧版本的清理:随着时间推移,旧版本的数据可能会堆积。数据库需要定期清理这些旧版本,以节省空间。
-
清理条件:只有当没有事务需要旧版本时,数据库才会清理这些版本。
5. MVCC的应用场景
数据库系统
-
MySQL:MySQL的InnoDB存储引擎使用MVCC来实现事务的隔离级别,如
READ COMMITTED和REPEATABLE READ。 -
PostgreSQL:PostgreSQL也使用MVCC来管理事务并发,支持高并发的读写操作。
-
SQLite:SQLite在某些模式下也支持MVCC,用于提高并发性能。
分布式系统
-
Cassandra:Cassandra使用MVCC来处理分布式环境下的并发读写操作。
-
其他NoSQL数据库:许多NoSQL数据库也借鉴了MVCC的思想,以提高系统的并发性能。
6. MySQL中的实现
-
版本链与Undo日志:每次修改数据时,旧版本数据会被保存在Undo日志中,新版本数据则附加到版本链上。
-
ReadView:事务启动时创建的快照视图,用于确定哪些数据版本对当前事务可见。
-
快照读与当前读:快照读基于ReadView读取历史版本数据,而当前读则读取最新版本数据并加锁。
1 锁机制
MySQL中与MVCC配合的锁机制主要包括以下几种:
1.1 共享锁(S锁)与排他锁(X锁)
-
共享锁:适用于读操作,允许多个事务同时读取同一数据,但阻止其他事务对该数据加排他锁。
-
排他锁:用于写操作(如
UPDATE、DELETE),确保事务独占数据行,其他事务无法对该数据行加任何锁。
在READ COMMITTED隔离级别下,读操作不加锁,写操作加排他锁。而在REPEATABLE READ隔离级别下,读操作使用快照读,写操作加排他锁。
1.2 间隙锁(Gap Lock)与临键锁(Next-Key Lock)
-
间隙锁:锁定索引记录之间的“间隙”,防止其他事务在这些间隙中插入新记录,从而避免幻读。
-
临键锁:是记录锁和间隙锁的组合,锁定记录本身及其前后的间隙,常用于
REPEATABLE READ隔离级别。
1.3 意向锁(Intention Locks)
意向锁用于表级锁定,表明事务对表中某些行的锁定意图。虽然意向锁本身不直接参与MVCC,但它可以帮助优化锁的管理。
2. MVCC与锁机制的配合
-
在
READ COMMITTED隔离级别下,MVCC通过快照读实现非阻塞读取,而写操作加排他锁。 -
在
REPEATABLE READ隔离级别下,MVCC结合ReadView和临键锁,确保事务内多次读取结果一致,同时防止幻读。 -
在
SERIALIZABLE隔离级别下,MVCC几乎不发挥作用,所有读写操作都通过严格的锁机制实现串行化。
3 总结
MySQL的MVCC机制通过版本链、Undo日志和ReadView实现高效的并发读取,而锁机制(如共享锁、排他锁、间隙锁和临键锁)则用于控制写操作和防止幻读。不同的事务隔离级别决定了MVCC与锁机制的具体配合方式。
相关文章:
MVCC(多版本并发控制)机制讲解
MVCC(Multi-Version Concurrency Control,多版本并发控制)这是一个在数据库管理系统中非常重要的技术,尤其是在处理并发事务时。别担心,我会用简单易懂的方式来讲解,让你轻松掌握它的原理和作用。 1. 什么是…...
React 与 Vue 对比指南 - 上
React 与 Vue 对比指南 - 上 本文将展示如何在 React 和 Vue 中实现常见功能,从基础渲染到高级状态管理 Hello 分别使用 react 和 vue 写一个 Hello World! react export default () > {return <div>Hello World!</div>; }vue <…...
开源协议深度解析:理解MIT、GPL、Apache等常见许可证
目录 前言1. MIT协议:自由而宽松的开源许可1.1 MIT协议的主要特点1.2 MIT协议的适用场景 2. GPL协议:自由软件的捍卫者2.1 GPL协议的核心理念2.2 GPL协议的适用场景 3. Apache License 2.0:开源与专利保护的平衡3.1 Apache License 2.0的主要…...
通用评估系统(五)- 前端部分总体说明
通用评估系统(五)- 前端部分总体说明 相关链接 Gitee地址通用评估系统(一)- 介绍通用评估系统(二)- 原型设计通用评估系统(三)- 前端部分通用评估系统(四)-…...
STM32GPIO
目录 GPIO基本结构GPIO位结构输入部分输出部分 输出模式GPIO模式浮空/上拉/下拉模拟输入开漏和推挽复用开漏/复用推挽 GPIO基本结构 GPIO是挂载在APB2总线上的外设。GPIO结构中的寄存器分为输入寄存器和输出寄存器,APB2总线通过输出寄存器向引脚发送数据,…...
MyBatis拦截器终极指南:从原理到企业级实战
在本篇文章中,我们将深入了解如何编写一个 MyBatis 拦截器,并通过一个示例来展示如何在执行数据库操作(如插入或更新)时,自动填充某些字段(例如 createdBy 和 updatedBy)信息。本文将详细讲解拦…...
SpringBoot启动失败之application.yml缩进没写好
修改前: spring前面空格了 报错输出:Failed to configure a DataSource: ‘url’ attribute is not specified and no embedded datasource could be configured. Reason: Failed to determine a suitable driver class Action: Consider the follow…...
【JavaScript】《JavaScript高级程序设计 (第4版) 》笔记-Chapter17-事件
十七、事件 事件 JavaScript 与 HTML 的交互是通过事件实现的,事件代表文档或浏览器窗口中某个有意义的时刻。可以使用仅在事件发生时执行的监听器(也叫处理程序)订阅事件。在传统软件工程领域,这个模型叫“观察者模式”ÿ…...
鸿蒙开发:V2版本装饰器之@Monitor装饰器
前言 本文代码案例基于Api13。 随着官方的迭代,在新的Api中,对于新的应用开发,官方已经建议直接使用V2所属的装饰器进行开发了,所以,能上手V2的尽量上手V2吧,毕竟,V2是V1的增强版本,…...
51单片机-外部中断
以外部中断0为例: 主程序中需要有以下代码: EA1; //打开总中断开关 EX01; //开外部中断0 IT00/1; 设置外部中断的触发方式 P3.2\P3.3为外部中断接口,通过控制P3.2口按键按下实现LED灯反转点亮 #include "reg52.h"typed…...
UE C++ UObject 功能的初步总结(结合官方文档)
一. Uboject的官方文档的个人理解 Objects in Unreal Engine | 虚幻引擎 5.5 文档 | Epic Developer Community 目录在此 1.垃圾回收:上篇文章简单介绍过,UObject的创建和回收。本身是很复杂的功能,后续会接着单项深入分析。 2.引用更新 1. 反射:之前…...
DeepSeek和ChatGPT的全面对比
一、模型基础架构对比(2023技术版本) 维度DeepSeekChatGPT模型家族LLAMA架构改进GPT-4优化版本参数量级开放7B/35B/120B闭源175B位置编码RoPE NTK扩展ALiBiAttention机制FlashAttention-3FlashAttention-2激活函数SwiGLU ProGeGLU训练框架DeepSpeedMeg…...
Spring Boot Actuator 监控✨
Spring Boot Actuator 是 Spring Boot 提供的一个强大的监控和管理工具,它可以帮助你深入了解和监控你的应用程序的运行状态。通过 Actuator,你可以获取应用程序的健康状况、内存使用情况、线程信息、HTTP 请求跟踪等。🚀 核心知识点 &#…...
构建高效 Python Web 应用:框架与服务器的选择及实践
构建高效 Python Web 应用:框架与服务器的选择及实践 flyfish 从选择合适的 Web 框架(如 Flask 和 FastAPI)到部署时选用适当的 Web 服务器(如 Waitress、Gunicorn、uWSGI 和 Uvicorn)的全过程。它不仅介绍了各个框架…...
LED灯闪烁实验:Simulink应用层开发
文章目录 1 阶段目标2 开发过程2.1 模型搭建2.2 模型仿真2.3 数据字典配置2.4 代码生成3 总结1 阶段目标 本文是《LED灯闪烁实验》的第三部分,会通过图文结合的方式,手把手带读者操作Simulink工具进行LED灯闪烁的应用层开发。 本章的开发可分解为如下若干过程: 方波输出建…...
在做题中学习(89):螺旋矩阵
解法:模拟 思路:创建ret数组,用变量标记原矩阵的行数和列数,遍历一个元素就push_back进ret数组,每次遍历完一行或一列,相应行/列数--,进行顺时针螺旋遍历到为0即可。 细节:要有边界…...
使用EasyExcel和多线程实现高效数据导出
使用EasyExcel和多线程实现高效数据导出 1. 概述 在企业级应用中,数据导出是一个常见的需求。为了提高导出效率,尤其是在处理大量数据时,我们可以结合使用EasyExcel库和多线程技术。本文将详细介绍如何通过EasyExcel和多线程技术实现高…...
rabbitmq五种模式的实现——springboot
rabbitmq五种模式的实现——springboot 基础知识和javase的实现形式可以看我之前的博客 代码地址:https://github.com/9lucifer/rabbitmq4j-learning 一、进行集成 (一)Spring Boot 集成 RabbitMQ 概述 Spring Boot 提供了对 RabbitMQ 的自…...
每日学习Java之一万个为什么
9.Class <?> class1 Myclass.class 为什么要有通配符?传给谁用的? 首先,这里的class特指某个对象在JVM中的元数据集合。 有普通、接口、数组、基本类型、 void 类型、局部类、匿名类、枚举、注解 1.类型安全:通配符允许…...
寒假学习总结
整个寒假都走在数据结构与算法的路上,深入学习了其中多个板块,刷了一些与之对应的题目,下面来一期总结(c) (emmm,主播在寒假试着去学习了几大语言的语法基础(丢丢) 如Ja…...
2025年能源电力系统与流体力学国际会议 (EPSFD 2025)
2025年能源电力系统与流体力学国际会议(EPSFD 2025)将于本年度在美丽的杭州盛大召开。作为全球能源、电力系统以及流体力学领域的顶级盛会,EPSFD 2025旨在为来自世界各地的科学家、工程师和研究人员提供一个展示最新研究成果、分享实践经验及…...
Docker 运行 Kafka 带 SASL 认证教程
Docker 运行 Kafka 带 SASL 认证教程 Docker 运行 Kafka 带 SASL 认证教程一、说明二、环境准备三、编写 Docker Compose 和 jaas文件docker-compose.yml代码说明:server_jaas.conf 四、启动服务五、验证服务六、连接kafka服务七、总结 Docker 运行 Kafka 带 SASL 认…...
连锁超市冷库节能解决方案:如何实现超市降本增效
在连锁超市冷库运营中,高能耗、设备损耗快、人工管理低效等问题长期困扰企业。御控冷库节能解决方案通过智能控制化霜、按需化霜、实时监控、故障诊断、自动预警、远程控制开关六大核心技术,实现年省电费15%-60%,且不改动原有装备、安装快捷、…...
在 Nginx Stream 层“改写”MQTT ngx_stream_mqtt_filter_module
1、为什么要修改 CONNECT 报文? 多租户隔离:自动为接入设备追加租户前缀,后端按 ClientID 拆分队列。零代码鉴权:将入站用户名替换为 OAuth Access-Token,后端 Broker 统一校验。灰度发布:根据 IP/地理位写…...
安宝特方案丨船舶智造的“AR+AI+作业标准化管理解决方案”(装配)
船舶制造装配管理现状:装配工作依赖人工经验,装配工人凭借长期实践积累的操作技巧完成零部件组装。企业通常制定了装配作业指导书,但在实际执行中,工人对指导书的理解和遵循程度参差不齐。 船舶装配过程中的挑战与需求 挑战 (1…...
在Ubuntu24上采用Wine打开SourceInsight
1. 安装wine sudo apt install wine 2. 安装32位库支持,SourceInsight是32位程序 sudo dpkg --add-architecture i386 sudo apt update sudo apt install wine32:i386 3. 验证安装 wine --version 4. 安装必要的字体和库(解决显示问题) sudo apt install fonts-wqy…...
[免费]微信小程序问卷调查系统(SpringBoot后端+Vue管理端)【论文+源码+SQL脚本】
大家好,我是java1234_小锋老师,看到一个不错的微信小程序问卷调查系统(SpringBoot后端Vue管理端)【论文源码SQL脚本】,分享下哈。 项目视频演示 【免费】微信小程序问卷调查系统(SpringBoot后端Vue管理端) Java毕业设计_哔哩哔哩_bilibili 项…...
Scrapy-Redis分布式爬虫架构的可扩展性与容错性增强:基于微服务与容器化的解决方案
在大数据时代,海量数据的采集与处理成为企业和研究机构获取信息的关键环节。Scrapy-Redis作为一种经典的分布式爬虫架构,在处理大规模数据抓取任务时展现出强大的能力。然而,随着业务规模的不断扩大和数据抓取需求的日益复杂,传统…...
uniapp 小程序 学习(一)
利用Hbuilder 创建项目 运行到内置浏览器看效果 下载微信小程序 安装到Hbuilder 下载地址 :开发者工具默认安装 设置服务端口号 在Hbuilder中设置微信小程序 配置 找到运行设置,将微信开发者工具放入到Hbuilder中, 打开后出现 如下 bug 解…...
渗透实战PortSwigger靶场:lab13存储型DOM XSS详解
进来是需要留言的,先用做简单的 html 标签测试 发现面的</h1>不见了 数据包中找到了一个loadCommentsWithVulnerableEscapeHtml.js 他是把用户输入的<>进行 html 编码,输入的<>当成字符串处理回显到页面中,看来只是把用户输…...
