聊一聊mysql的MVCC

news2024/11/26 2:35:58

技术主题

在mysql世纪使用中,经常涉及到MVCC的概念(Multi-Vsersion Concurrency Control),即多版本并发控制,一种并发控制方法,根本目的是主为了提升数据库的并发性能。

mvcc为什么产生

数据库最原生的锁:
最原生的锁,锁住一个资源后禁止其他任何线程访问同一个资源。但是很多应用的一个特点都读多写少的场景,很多数据的读取次数远大于修改的次数。
读写锁的出现:
读锁和读锁之间不互斥,而写锁和写锁、读锁都互斥,这样很大提升系统的并发能力。
mvcc概念出现:
能不能让读写之间也不冲突的方法,就是读取数据时通过一种类似快照的方式将数据保存下来,这样读锁和写锁不冲突了,不同的事物session看到自己特定版本的数据。
总结:
MVCC就是因为大佬们,不满意让数据库采用悲观锁性能不佳的形式去解决读-写冲突问题,而提出的解决方案,就在数据库中加上MVCC。形成下面两个组合:
MVCC + 悲观锁
MVCC解决读写冲突,悲观锁解决写写冲突
MVCC+乐观锁
MVCC解决读写冲突,乐观锁解决写写冲突

普及常见锁

读锁:
也叫共享锁、S锁,若事物T对数据对象A加上S锁,则事物T可以读但不能修改A,其他事务只能再对A加S锁,而不能加X锁,直到T释放A上的S锁。
写锁
又称排他锁、X锁。若事物T对数据对象A加上X锁,其他事物不能对A加任何锁
表锁:
操作对象是数据表。mysql大多数锁策略都支持,是系统开销最低但并发性能最低的一个锁策略。事务t对整个表加读锁,则其他事务可读不可写,若加写锁,则其他事务增删改都不行
行级锁:
操作对象是数据表中的一行,是mvcc技术用的最多的。

技术MVCC适用于事务隔离级别

MVCC只在读取已提交,可重复读,两个隔离级别下工作。其他两个隔离级别够和MVCC不兼容, 因为 READ UNCOMMITTED (读取未提交) 总是读取最新的数据行, 而不是符合当前事务版本的数据行。而 SERIALIZABLE (可串行化) 则会对所有读取的行都加锁。

MVCC实现原理

MVCC的目的就是多版本并发控制,在数据库中的实现,就是为了解决读写冲突,它的实现原理主要依赖记录中的3个隐式字段,undo日志,Read View来实现的。

3个隐式字段
DB_TRX_ID, DB_ROLL_PTR, DB_ROW_ID

简单来说:第一个事务id(每处理一次加一),第二个是指向undolock的一个指针,第三个是用于存在聚集索引中的id。

DB_TRX_ID,6个字节,插入或更新行的最后一个事务的事务标识符。(删除视为更新,将其标记为已删除)
DB_ROLL_PTR,7个字节,写入回滚段的撤消日志记录(若行已更新,则撤消日志记录包含在更新行之前重建行内容所需的信息)
DB_ROW_ID,6个字节,行标识,隐藏单调自增id
在这里插入图片描述
DB_ROW_ID 是数据库默认为该行记录生成的唯一隐式主键,DB_TRX_ID 是当前操作该记录的事务 ID ,而 DB_ROLL_PTR 是一个回滚指针,用于配合 undo日志,指向上一个旧版本

事务A:对数据进行了修改(将name中的张三改为李四)
第一步:用排他锁锁定这一条记录
在这里插入图片描述
第二步:undolog会记录日志,作为旧记录,既在undo log 中有当前行的的拷贝副本
在这里插入图片描述
第三步:将回滚指针的值copy到undolog中
在这里插入图片描述
第四步:修改当前的name值并且修改隐藏字段的事务id作为当前事务1的id。默认是从1开始,之后递增,回滚指针指向拷贝到undo log的副本记录,表示上一个版本。
在这里插入图片描述

事务B:事务A修改但未提交,同时对事务B也对这行数据做了修改
在这里插入图片描述

undo日志

undo日志
insert undo log
代表事务在 insert 新记录时产生的 undo log, 只在事务回滚时需要,并且在事务提交后可以被立即丢弃

update undo log
事务在进行 update 或 delete 时产生的 undo log ; 不仅在事务回滚时需要,在快照读时也需要;所以不能随便删除,只有在快速读或事务回滚不涉及该日志时

当前读和快照读

当前读:
像select语句:lock in share mode(共享锁),select 语句for update;insert,delete这些操作都是一种当前读,就是读取的是记录的最新版本。读取加锁

快照读:
像不加锁的select * from 操作就是快照读,即不加锁的非阻塞读,不涉及其他锁之间的冲突;快照读的前提是隔离级别不是串行级别,串行级别下的快照读会退化成当前读;之所以出现快照读的情况,是基于提高并发性能的考虑,快照读的实现是基于多版本并发控制,即MVCC,可以认为MVCC是行锁的一个变种,但它在很多情况下,避免了加锁操作,降低了开销;既然是基于多版本,即快照读可能读到的并不一定是数据的最新版本,而有可能是之前的历史版本。

ReadView

ReadView说白了就是一个数据结构,在sql开始的时候被创建,是事务进行快照读(select * from) 操作的时候生产的读视图。
ReadView{low_trx_id, up_trx_id, trx_ids}
1)low_trx_id表示该SQL启动时,当前事务链表中最大的事务id编号,也就是最近创建的除自身以外最大事务编号;
2)up_trx_id表示该SQL启动时,当前事务链表中最小的事务id编号,也就是当前系统中创建最早但还未提交的事务;
3)trx_ids表示所有事务链表中事务的id集合。

最后,至于位于(up_trx_id, low_trx_id)中间的事务是否可见,这个需要根据不同的事务隔离级别来确定。对于RC的事务隔离级别来说,对于事务执行过程中,已经提交的事务的数据,对当前事务是可见的,也就是说上述图中,当前事务运行过程中,trx1~4中任意一个事务提交,对当前事务来说都是可见的;而对于RR隔离级别来说,事务启动时,已经开始的事务链表中的事务的所有修改都是不可见的,所以在RR级别下,low_trx_id基本保持与up_trx_id相同的值即可。

作用

MVCC(Multi-Version Concurrency Control)是MySQL实现读写并发控制的一种机制。它主要的原理是通过创建多个版本来实现并发读,从而避免了加锁的方式所带来的潜在问题,如死锁、阻塞等。具体来说,当一个事务开始时,MySQL 会为其创建一个事务 ID,同时在其所要访问的每个表上创建一个新的快照版本号。每个快照版本号都包含了该表上所有已经提交的修改。也就是说,对于读操作,只会读取当前事务开始前已经存在的版本数据,而对于写操作,MySQL会在写操作前先检查所有已提交的事务中是否有对其操作的数据版本,如果有,则会阻塞写操作,直到当前事务提交后重新检查并进行写操作。这样可以保证在同一时间点只有一个事务对同一数据进行写操作,从而避免了幻读的发生。这样的方式下可以提高并发性能和数据一致性,同时也避免了一些潜在问题。

解决幻读

MySQL使用多版本并发控制(MVCC)来解决幻读(Phantom Read)问题。幻读是指在一个事务中,当查询的结果集合发生变化时,即使没有其他事务修改了数据,也会出现不一致的情况。

MVCC是通过在每个数据行上保存多个版本来实现的。当一个事务开始时,MySQL会为该事务创建一个唯一的事务ID(Transaction ID)。在事务执行期间,该事务ID与每个数据行的版本进行比较。

当一个事务执行查询时,MySQL会根据事务ID查找可见的数据版本。具体来说,它会查找满足以下条件的数据版本:

数据版本的创建时间早于或等于事务的开始时间。
数据版本的删除时间晚于事务的开始时间。
数据版本的创建时间早于或等于事务的提交时间(如果事务已提交)。
通过这种方式,事务只能看到在事务开始之前已经存在的数据,而不会看到在事务开始后其他事务插入或删除的数据。这种机制可以避免幻读的发生。

需要注意的是,MVCC只在数据库的隔离级别为"可重复读"(REPEATABLE READ)和更高级别时才适用。在隔离级别为"读已提交"(READ COMMITTED)时,MySQL使用行级锁来解决幻读问题。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/662840.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

设计模式大全

使用设计模式的目的: 程序猿在编码的过程中面临着来自耦合性、内聚性、可维护性、可扩展性、重用性、灵活性等多方面的挑战。设计模式是为了让程序具有更好的: 1)重用性,即相同功能的代码编写一次即可,不用重复编写 …

3-JVM 运行时数据区

目录 1.堆(线程共享)(最大的一块区域) 2.Java虚拟机栈(线程私有) 3.本地方法栈(线程私有) 4.程序计数器(线程私有) 5.方法区(线程共享&#…

Oracle JSON_ARRAYAGG()函数的默认排序问题

引入: 在实际操作中,俺写了这样一个Funtcion: FUNCTION fun_get_xxx(v_param_one VARCHAR2) RETURN CLOB ASv_OUTPUT CLOB;BEGINWITH temp_table AS (SELECT * FROM (( SELECT one.action_id,two.log_timeFROM table_one oneLEFT JOIN table…

Python程序设计基础:字符串

文章目录 一、字符串二、字符串的索引与切片三、字符串处理与操作四、format()格式化方法五、字符串与数值的转换 一、字符串 在Python中,使用单引号或双引号括起来的内容,称为字符串类型数据(str),可以使用以下4种方…

Linux主分区,扩展分区,逻辑分区的联系和区别

基本概念 硬盘分区有三种, 主磁盘分区、扩展 磁盘分区、 逻辑分区。 一个 硬盘 主分区至少有1个,最多4个,扩展分区可以没有,最多1个。且 主分区扩展分区总共不能超过4个。 逻辑分区可以有若干个。 在windows下激活的 主分区是 …

树形结构-二叉树结构

树形结构 树形结构简介 树结构是一种非线性储存结构,存储的是具有“一对多”关系的数据元素的集合 树的相关术语 结点(Node) 使用树结构存储的每一个数据元素被成为“结点” 结点的度(Degree of Node) 某个结点所拥…

一次完整的Loadrunner基本流程操作

目录 一.生成脚本: 二.回放脚本: 三.创建场景: 四.生成报告: Loadrunner基本流程操作 准备条件: 一.安装loadrunner 二.破解loadrunner (注:本次使用lr11版本可以兼容的IE浏览器版本为I…

Qt简单讲解项目结构

Qt简单讲解项目结构 项目结构 主函数入口 #include "mainwindow.h"#include <QApplication>// 程序入口 argc 表示命令行变量的数量 argv表示命令行变量的数组 int main(int argc, char *argv[]) {// a表示应用程序对象QApplication a(argc, argv);MainWin…

绿色节能数据中心供配电系统设计

随着新一代信息技术的快速发展&#xff0c;数据资源存储、计算和应用需求大幅提升&#xff0c;机房在各个领域都有着广泛的应用&#xff0c;如学校内有专用机房、通信类企业有通信机房等。近年来&#xff0c;国家对新型数据中心机房建设也越来越重视&#xff0c;据工信部、国家…

Flutter私服搭建之package查询

温馨提示&#xff1a;这是一篇私有的package客户端查询的平台搭建文章&#xff0c;牵扯到python中的Djiango框架&#xff0c;虽和Flutter相关&#xff0c;但客户端的代码并没有关联&#xff0c;请您根据需要进行阅读。 公有的package&#xff0c;对于一个Flutter开发者而言&…

centos + lnmp + tp6部署的项目,访问的时候经常出现No input file specified

1.检查路径设置 检查你的 Nginx 配置文件是否正确指定了 PHP 路径&#xff0c;确认文件路径是否正确。同时&#xff0c;确保你的 Web 服务器具有访问权限。 server { listen 80; server_name example.com; root /usr/share/nginx/html; index index.html ind…

汽车电子行业ECU烧录工艺人必须面对的重要课题

在汽车电子行业ECU烧录是很一个关键工序&#xff0c;如何有效地通过对它的过程进行管控是每个工艺人必须面对的重要课题。 为了解决烧录过程管控的问题&#xff0c;我们合共软件针对汽车电子行业研发的HG MES中有专门的烧录模块用于应对这一问题。对ECU烧录管控的核心目标是如…

MySQL 数据库的命令操作

文章目录 一.Mysql数据库的基本概念二.Mysql数据库系统发展史三.现主流Mysql数据库介绍四.关系数据库五.非关系数据库介绍六.MySQL安装方法1. 创建新的数据库2.创建新的表3.删除指定的数据库4.删除指定的数据表5.向数据表中插入新的数据记录6.修改、更新数据表中的数据记录7.在…

腾讯云对象存储COS及CDN加速配置

1. 登陆腾讯云官网&#xff0c;进入腾讯云对象存储COS控制台 腾讯云&#xff1a;https://cloud.tencent.com 2. 创建存储空间 3. 添加自定义CDN加速域名 在腾讯云COS的指定的存储桶中添加自定义CDN加速域名 在阿里云官网添加一个解析记录&#xff0c;等待两分钟就可以用该域名…

新书上市丨开启学习自然语言处理与ChatGPT的精彩旅程,你需要这本书!

2022年10月30日&#xff0c;ChatGPT 的横空出世&#xff0c;引起了全球范围内的广泛关注。微软创始人比尔盖茨 (Bill Gates) 认为 “ChatGTP 与互联网具有同等重要的意义”。作为一个人工智能系统&#xff0c;ChatGPT 能准确识别用户意图&#xff0c;与用户进行对话并提供有价值…

postgresql优化案例三:recheck cond

文章目录 1.SQL语句2.查看改善前执行计划:3.解决方案3.1增加work_mem的size3.2.创建合适的索引 4.改善后执行计划 1.SQL语句 delete from sap_dispatchingd_hist awhere exists (select 1 from sap_dispatchingm_hist b where a.ffact_nob.ffact_noand a.fsfc_nob.fsfc_noand …

正确认识:DOTA-CH2-Alkynyl(HCl salt),螯合剂修饰肽,物理化学性质参数

1.试剂基团反应特点&#xff08;Reagent group reaction characteristics&#xff09;&#xff1a; DOTA-CH2-Alkynyl(HCl salt)使用有机溶剂或浓盐酸&#xff08;HCl&#xff09;&#xff0c;在酸化的环境中螯合剂修饰肽的主要优点是高效率和不存在有机溶剂。它可以应用于多种…

给清洁设备以“生命”,国邦从生产型制造走向服务型制造的转型之路|案例研究

国邦协同科技&#xff08;广州&#xff09;有限公司&#xff08;以下简称“国邦”&#xff09;成立于2011年&#xff0c;是行业领先的清洁解决方案服务商&#xff0c;致力于为客户提供全周期清洁解决方案&#xff0c;提高其清洁品质及效率。在2016年到2020年连续5年的时间里&am…

python 操作配置文件。

一&#xff1a;配置文件 1. 什么是配置文件 配置文件是为程序配置参数和初始设置的文件。一般为文本文件&#xff0c;以ini,conf,cnf,cfg,yaml等作为后缀名。 例如mysql的配置文件my.cnf内容如下&#xff1a; [mysqld] # Only allow connections from localhost bind-addre…

Java30天拿下---第三天(选择,循环,二重循环语句,输入,调试,标签)

Java30天拿下---第三天 一 流程图二 选择结构简单的if-else嵌套的if-else多重if的选择语句&#xff08;else-if&#xff09;switch语句 二 输入验证三 程序调试四 循环结构while循环do-while循环for循环流程控制二重循环&#xff08;重点&#xff09; 五 标签 label&#xff08…