拒绝零散碎片, 一文理清MySQL的各种锁

news2024/12/22 10:53:13

系列文章目录

学习MySQL先有全局观,细说其发展历程及特点
Mysql常用操作,谈谈排序与分页


在这里插入图片描述

相信大家在日常使用Mysql的过程中,对锁也有着一些了解。什么排它/共享锁,表锁、行锁,还有意向锁之类的。相信同学们也看到过很多相关文章,不过大部分文章只是偏重其中某一种锁进行深入分析,实话实说,确实有不少锁的逻辑较为复杂,值得摸索。但对于大部分同学而言,我认为最好是先对这些锁有个总体的认知,做到先总再分,这样才更能从全局了解锁的设计。

📕作者简介:战斧,从事金融IT行业,有着多年一线开发、架构经验;爱好广泛,乐于分享,致力于创作更多高质量内容
📗本文收录于 mysql 专栏,有需要者,可直接订阅专栏实时获取更新
📘高质量专栏 云原生、RabbitMQ、Spring全家桶 等仍在更新,欢迎指导
📙Zookeeper Redis dubbo docker netty等诸多框架,以及架构与分布式专题即将上线,敬请期待

一、MySQL的锁指什么

我们先来看一下Mysql的基本构成,如下图,以前我们其实也介绍过,MySQL数据库总体分为三个部分:

  • Server层:负责处理客户端连接、查询解析和优化、数据访问控制、事务处理、日志、replication和其他管理操作。
  • 存储引擎:负责数据的存储和检索等操作。MySQL支持多个存储引擎,如InnoDB、MyISAM、MEMORY等。
  • 物理磁盘层:真正存储数据的位置,保存着数据库数据以及各类日志。

在这里插入图片描述

我们日常说的MySQL的各种锁,有的是由存储引擎提供的(如行锁),有些锁是有Server层提供的(如全局锁、表锁),它们结合起来才形成了完整的锁的体系

二、排他与共享

锁从不同角度理解,其实会有不同的分类,也就是说同一个东西,在不同的分类下叫不同的锁,但其实它们并不冲突。在讨论 MySQL 的锁时,一般我们会有这样两种分类:

  • 锁的粒度
  • 是否排他

从锁的粒度来看,可以分为全局锁表锁行锁,顾名思义,锁的层级分别是数据库、某张表、以及表里的行。
从是否独占来看,可以分为排它锁共享锁

在innoDB,对于同一个资源,是允许设定 排它锁(X) 和 共享锁(S) 两种的,它们的兼容关系如下:

XS
X冲突冲突
S冲突兼容

比如事务A对某一行上了共享锁(S),此时再来一个事务B,如果B需要这个资源的共享锁,那么它能立即获得。如果B需要该资源的排它锁,事务B就需要等待了。

而不同粒度的锁,接下来我们以一一讲解

三、全局锁(Global Lock)

用于 限制整个数据库实例 的访问,当执行一些需要全局一致性的操作时,例如备份、恢复等,可以使用全局锁,如下命令

 FLUSH TABLES WITH READ LOCK

这个命令会对所有数据库的所有表都上一个读锁,加完这个锁后,所有的表都会被锁定从而无法插入任何内容了(mysql自己的系统日志表不在此列)

四、表锁(Table Lock)

锁定整个表,在执行涉及整个表的操作时,会对整个表进行锁定,避免其他事务对该表进行并发操作。它的上锁及解锁语法如下

-- 加锁
LOCK {TABLE | TABLES}
 tbl_name [[AS] alias] lock_type
 [, tbl_name [[AS] alias] lock_type] ...
lock_type: {
 READ [LOCAL]
 | WRITE
}

-- 释放锁
UNLOCK {TABLE | TABLES}

一般情况下,不建议使用这种表锁,除非是对一组MyISAM的表来操作,那么提前将它们锁定会提高效率

五、意向锁(Intention Locks)

InnoDB 支持多粒度锁,允许行锁和表锁共存。例如下面的语句就可以在指定的表上使用排他锁(X锁):

LOCK TABLES … WRITE

而为了同时避免遍历行锁的困境:比如事务A获取了某一行的排它锁,此时事务B想锁表,就必须遍历每一行检查是否有锁;同时也为了避免不同粒度间的锁出现死锁,所以InnoDB使用了意向锁。意向锁是表级别的锁,它指示事务以后对表中的某一行需要哪种类型的锁(共享的还是排他的)。有两种类型的意向锁:

  • 意向共享锁(IS)表明事务打算对表中的单个行设置共享锁
  • 意向排他锁(IX)表示事务打算对表中的单个行设置排他锁

例如,SELECT…FOR SHARE 设置IS锁,SELECT…FOR UPDATE 设置一个IX锁。
在事务获得表中某一行的共享锁之前,它必须首先获得表上的IS锁或更强的锁。
在事务获得表中某一行的排他锁之前,它必须首先获得该表上的IX锁

表级锁类型兼容性如下表所示:

XIXSIS
X冲突冲突冲突冲突
IX冲突兼容冲突兼容
S冲突冲突兼容兼容
IS冲突兼容兼容兼容

这个表的理解其实很简单:
(1)X 作为表的排他锁,和其他所有表锁冲突
(2)IX 代表准备修改某一行,此时如果有人持有表,不论是 X 还是 S,为了防止冲突或不一致,所以会返回冲突

如果锁与现有锁兼容,则将锁授予请求事务,但如果它与现有锁冲突,则不会授予。事务等待,直到冲突的现有锁被释放。如果锁请求与现有锁冲突,并且由于会导致死锁而无法授予,则会发生错误。

意向锁的主要目的是显示某人正在锁定表中的一行,或者将要锁定表中的一行,作为行锁前置的隐式锁。也就是说若你仅使用表锁,或仅使用行锁,意向锁是不会让你阻塞的。只有你在持有行锁的情况下又使用表锁,它才能发挥它的用处

六、行级锁(Row Lock)

在InnoDB存储引擎中,默认使用的是行级锁。它可以实现更细粒度的并发控制,只锁定部分行,而不是整个表,提高了并发性能。而从实际表现来说,其又分为三种 记录锁(Record Locks)间隙锁(Gap Locks),以及所谓临键锁(Next-Key Locks)。实际上在源码种,这三种锁其实叫 LOCK_REC_NOT_GAPLOCK_GAPLOCK_ORDINARY

/* Precise modes /
/
* this flag denotes an ordinary next-key lock in contrast to LOCK_GAP or
LOCK_REC_NOT_GAP /
constexpr uint32_t LOCK_ORDINARY = 0;
/
* when this bit is set, it means that the lock holds only on the gap before
the record; for instance, an x-lock on the gap does not give permission to
modify the record on which the bit is set; locks of this type are created
when records are removed from the index chain of records /
constexpr uint32_t LOCK_GAP = 512;
/
* this bit means that the lock is only on the index record and does NOT
block inserts to the gap before the index record; this is used in the case
when we retrieve a record with a unique key, and is also used in locking
plain SELECTs (not part of UPDATE or DELETE) when the user has set the READ
COMMITTED isolation level */
constexpr uint32_t LOCK_REC_NOT_GAP = 1024;

1. 记录锁(Record Locks)

记录锁是索引记录上的锁,例如,

SELECT c1 FROM t WHERE c1=10 For update;

这样就能阻止任何其他事务插入、更新或删除c1是10为的行。
记录锁总是锁定索引,即使定义的表没有索引也是如此。对于这样的情况,InnoDB创建一个隐藏的聚集索引,并使用该索引进行记录锁定

2. 间隙锁(Gap Locks)

如果我们把隔离级别设定为可重复度(RR),MySQL就会为我们解决”幻读“现象,这里面除了MVCC的作用外,还会在此时引入”间隙锁“的概念,间隙锁本质上是 在索引记录之间的间隙上的锁,或者在第一个索引记录之前或最后一个索引记录之后的间隙上的锁。比如说当我们执行这样一个SQL时

SELECT c1 FROM t WHERE c1 BETWEEN 10 and 20 For Update

就会防止其他事务将值15插入到列t.c1中,因为范围中所有现有值之间的间隙被锁定。

3. 临键锁(Next-Key Locks)

next-key锁是索引记录上的记录锁和索引记录之前的间隙上的间隙锁的组合。InnoDB执行行级锁的方式是,当它搜索或扫描一个表索引时,它会在遇到的索引记录上设置共享锁或排他锁。因此,行级锁实际上是索引记录锁。索引记录上的next-key锁也会影响该索引记录之前的“间隙”。也就是说,next-key锁是索引记录锁加上索引记录前面的间隙锁

假设索引包含值10、11、13和20。此索引的Next-Key Locks锁定则覆盖以下区间,其中圆括号表示不包含区间端点,方括号表示包含端点:

(negative infinity, 10]
(10, 11]
(11, 13]
(13, 20]
(20, positive infinity)

对于最后一个间隔,next-key锁锁定索引中最大值以上的间隙,以及值高于索引中任何实际值的“supremum”伪记录。”supremum“不是一个真正的索引记录,因此,实际上,这个next-key锁只锁定最大索引值后面的间隙。默认情况下,InnoDB运行在REPEATABLE READ事务隔离级别。在这种情况下,InnoDB使用next-key锁进行搜索和索引扫描,这可以防止幻行。

4. 插入意向锁(Insert Intention Locks)

学习了上面的间隙锁,我们不难知晓,想要插入新数据通常需要先获得间隙锁(隔离级别为可重复读及以上)。按照常理来说,如果有多个事务都想往一个间隙里插入数据,它们只要慢慢排队就好了,但是,我们还需要意识到,一旦事务A插入一条数据成功,原先的间隙可能就会变成两个间隙,事务B可能又被A新诞生的这个间隙所阻碍。为了优化这种插入排队的情况,innodb提出了插入意向锁的概念:

An insert intention lock is a type of gap lock set by INSERT operations prior to row insertion. This lock
signals the intent to insert in such a way that multiple transactions inserting into the same index gap
need not wait for each other if they are not inserting at the same position within the gap

插入意图锁是insert操作在行插入之前设置的一种间隙锁。这个锁以这样一种方式表示插入的意图,即插入到相同索引间隙中的多个事务如果不在间隙内的相同位置插入,则不需要彼此等待

也就是说,插入操作在获取间隙锁之前,会先获取到插入意向锁,下面的示例演示了一个事务在获得插入记录的排他锁之前使用插入意图锁。该示例涉及两个客户机A和b。客户机A创建一个包含两个索引记录(90和102)的表,然后启动一个事务,对ID大于100的索引记录设置排他锁。排他锁包括记录102之前的间隙锁:

mysql> CREATE TABLE child (id int(11) NOT NULL, PRIMARY KEY(id)) ENGINE=InnoDB;
mysql> INSERT INTO child (id) values (90),(102);

mysql> START TRANSACTION;
mysql> SELECT * FROM child WHERE id > 100 FOR UPDATE;
+-----+
| id |
+-----+
| 102 |
+-----+

客户端B开始一个事务,向缺口间隙插入一条记录,事务在等待获得排他锁时接受插入意图锁:

mysql> START TRANSACTION;
mysql> INSERT INTO child (id) VALUES (101);

在SHOW ENGINE INNODB STATUS和INNODB monitor输出中,插入意图锁的事务数据如下所示:

RECORD LOCKS space id 31 page no 3 n bits 72 index `PRIMARY` of table `test`.`child`
trx id 8731 lock_mode X locks gap before rec insert intention waiting
Record lock, heap no 3 PHYSICAL RECORD: n_fields 3; compact format; info bits 0
 0: len 4; hex 80000066; asc f;;
 1: len 6; hex 000000002215; asc " ;;
 2: len 7; hex 9000000172011c; asc r ;;...

5. 行锁总结

其实对于行锁,现在解析的文章有很多,我们后续也可能结合源码进行更深入的解释。但在这里我们可以先进行总结(源于Mysql源码版本8.0.30)

  • 锁基于扫描到的索引,对于innoDB,哪怕你没有显示建立索引,每一张表也都至少会有一个索引(即其聚集索引
  • 间隙锁(Gap Locks) 只有在隔离级别为可重复读以上才会有
  • 隔离级别为读未提交/读提交时,行级锁默认使用记录锁(Record Locks),隔离级别为可重复读/序列化时,行级锁默认使用的是临键锁(Next-Key Locks)
  • 间隙锁(Gap Locks) 的目的是不让这段间隙内插入新的数据,因此其设计与传统意义上的共享/排他概念不一样。比如:事务A在一个间隙上持有共享间隙锁(间隙s锁),而事务B可以在同一个间隙上持有排他性间隙锁(间隙x锁)

七、自增锁(AUTO-INC Locks)

AUTO-INC锁是一种特殊的表级锁,用于在具有AUTO_INCREMENT列的表中插入事务。

在最简单的情况下,如果一个事务正在向表中插入值,那么任何其他事务都必须等待对该表进行自己的插入,以便第一个事务插入的行接收连续的主键值。innodb_autoinc_lock_mode变量控制用于自动增量锁定的算法。它允许您选择如何在可预测的自动递增值序列和插入操作的最大并发性之间进行权衡。

在这里插入图片描述
这里有 0、1、2 三种模式可选

  • 0(traditional):这是最常用的模式。在这种模式下,InnoDB使用一个全局的互斥锁(AUTO-INC锁)来保护自增主键的访问。当有一个事务插入新记录时,其他事务必须等待该事务释放AUTO-INC锁后才能插入新记录,该锁通常保持到语句结束(而不是事务结束)。

  • 1(consecutive):在这种模式下,InnoDB使用一个递增的互斥锁(AUTO-INC锁)来保护自增主键的访问。如果我们可以预知插入的数据条数,InnoDB会为每个事务分配一个独立的自增值区间。当一个事务需要插入自增值时,它就可以在自己的区间内找到一个可用的自增值,然后将其插入到表中。通过为每个事务分配独立的自增值区间,Consecutive模式可以实现并行插入,这种模式适用于具有高并发读写的应用,可以提高性能。

  • 2(interleaved):这种模式是在MySQL 8.0中引入的新模式。在这种模式下,事务们都不再持有表级AUTO-INC锁,该模式可以支持多个语句可以同时生成数字,也就是说,数字的分配在多个语句之间交错进行。

需要注意的是,在我们使用它不同种类的插入语句的时候,consecutive 自增锁有可能还是会使用全局互斥锁的样子,因为不是每一种 insert 都能提前预知其数量的,比如下面这样的插入:

INSERT INTO t1 (c2) SELECT ... from another table ...

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1847587.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

数据仓库的实际应用示例-广告投放平台为例

数据仓库的数据分层通常包括以下几层: ODS层:存放原始数据,如日志数据和结构化数据。DWD层:进行数据清洗、脱敏、维度退化和格式转换。DWS层:用于宽表聚合值和主题加工。ADS层:面向业务定制的应用数据层。…

从零入手人工智能(4)—— 逻辑回归

1.小故事 一家金融科技公司,公司的首席执行官找到团队提出了一个紧迫的问题:“我们如何提前知道哪些客户可能会违约贷款?” 这让团队陷入了沉思,经过激烈讨论团队中的数据分析师提议:“我们可以尝试使用逻辑回归来预测…

解决双击bootstrap.bat没有生成b2.exe文件

双击bootstrap.bat但是并没有没有生成b2.exe文件,会报如下错误: "cl" 不是内部或外部命令,也不是可运行的程序 或批处理文件。D:\cppsoft\boost_1_85_0\tools\build\src\engine>dir *.exe 驱动器 D 中的卷是 Data 卷的序列号是…

六、在Qt下通过PCL在VTK9.3.0下显示自己的pcd点云文件

前几天刚整理好VTK8.2.0,发现我们的项目使用的PCL自带的VTK是9.3.0的,脸黑了快 VTK8.2.0可参考该篇博文:五、在Qt下加载QVTKWidget控件(VTK8.2.0),生成Visual Studio项目,显示点云(C…

如何基于项目人力和管线方案选择FGUI和UGUI

1)如何基于项目人力和管线方案选择FGUI和UGUI 2)TMP字体出包丢失字体描边 3)如何将一张贴图经过Shader处理后的结果输出给另外一个Shader使用 4)为什么我的水这么干净,和UE教程里的有差别 这是第390篇UWA技术知识分享的…

ECharts Y轴倒置,X轴顶部,图表反向

1.配置: xAxis:{position: ‘top’} //让x轴在顶部 yAxis: { inverse:true} //让Y轴坐标为反向坐标 2.将数据的只转换成负值(不建议),显示的时候formatter里面在显示正值(不建议)

强化安全新篇章:韶关石油化工可燃气体报警器年检解析

韶关,这座位于广东省北部的城市,近年来在石油化工行业取得了显著的发展。 随着一批批大型石化企业的进驻和投产,韶关不仅成为了区域性的石化产业基地,也为地方经济带来了强劲的增长动力。 然而,随着石化产业的快速发…

使用asyncua模块的subscribe_data_change监控opcua的Server节点数据变化

报错信息如下; ERROR:asyncua.common.subscription:DataChange subscription created but handler has no datachange_notification method 上述报错原因在于创建监控句柄SubscriptionHandler类时,节点数据变化的函数名称有问题,不是默认的da…

【NLP练习】Transformer实战-单词预测

🍨 本文为🔗365天深度学习训练营 中的学习记录博客🍖 原作者:K同学啊 任务:自定义输入一段英文文本进行预测 一、定义模型 from tempfile import TemporaryDirectory from typing import Tuple from torch import nn…

DVWA 靶场 Open HTTP Redirect 通关解析

前言 DVWA代表Damn Vulnerable Web Application,是一个用于学习和练习Web应用程序漏洞的开源漏洞应用程序。它被设计成一个易于安装和配置的漏洞应用程序,旨在帮助安全专业人员和爱好者了解和熟悉不同类型的Web应用程序漏洞。 DVWA提供了一系列的漏洞场…

Nuxt快速学习开发---Nuxt3视图Views

Views Nuxt提供了几个组件层来实现应用程序的用户界面 默认情况下&#xff0c;Nuxt 会将app.vue文件视为入口点并为应用程序的每个路由呈现其内容 应用程序.vue <template> <div> <h1>Welcome to the homepage</h1> </div> </template> …

湖南科技大学24计算机考研情况,软工学硕考数二,分数线290分,录取均分321分!

湖南科技大学&#xff08;Hunan University of Science and Technology&#xff09;坐落在伟人故里、人文圣地湘潭&#xff0c;处于长株潭核心区域&#xff0c;比邻湘潭九华经济技术开发区&#xff08;国家级&#xff09;&#xff0c;是应急管理部、国家国防科技工业局与湖南省…

复分析——第6章—— Γ 函数和 ζ 函数(E.M. Stein R. Shakarchi)

第6章 Γ函数和Ζ函数(The Gamma and Zeta Functions) 毫不夸张地说&#xff0c;Γ函数和Ζ函数是数学中最重要的非初等函数之一。Γ函数在自然界中无处不在。它出现在大量计算中&#xff0c;并以分析中出现的大量恒等式为特征。对此的部分解释可能在于Γ函数的基本结构特性&…

Nginx HTTPS(证书) 部署实战

一、申请证书与认证 要搭建https服务首先需有SSL证书&#xff0c;证书通常是在第三方申请&#xff0c;在阿里云的安全服务中有SSL证书这一项&#xff0c;可以在里面申请免费的证书。也可以在自己电脑中生成&#xff0c;虽然也能完成加密&#xff0c;但是浏览器是不认可的&…

编译 CanMV 固件

前言 上一章节中已经搭建好了基于 CanMV 的 C 开发环境&#xff0c;这么一来便可以进行基于 C 语言和 FreeRTOS 的应用开发或者编译基于 MicroPython 语法的应用开发方式所需的 CanMV 固件&#xff0c;本 章就将带领读者体验一下 CanMV 固件的编译流程。 本章分为如下几个小节&…

Java面试题:mysql执行速度慢的原因和优化

Sql语句执行速度慢 原因 聚合查询 多表查询 表数据量过大查询 深度分页查询 分析 sql的执行计划 可以使用EXPLAIN或者DESC获取Mysql如何执行SELECT语句的信息 直接在select语句前加关键字explain/desc 得到一个执行信息表 信息字段分析 possible_keys:可能使用到的索…

云计算【第一阶段(18)】磁盘管理与文件系统

一、磁盘基础 磁盘&#xff08;disk&#xff09;是指利用磁记录技术存储数据的存储器。 磁盘是计算机主要的存储介质&#xff0c;可以存储大量的二进制数据&#xff0c;并且断电后也能保持数据不丢失。 早期计算机使用的磁盘是软磁盘&#xff08;Floppy Disk&#xff0c;简称…

海外社媒网站抓取经验总结:如何更高效实现网页抓取?

有效的网络抓取需要采取战略方法来克服挑战并确保最佳数据提取。让我们深入研究一些关键实践&#xff0c;这些实践将使您能够掌握复杂的网络抓取。 一、了解 Web 抓取检测 在深入探讨最佳实践之前&#xff0c;让我们先了解一下网站如何识别和抵御网络爬虫。了解您在这一过程中…

深度神经网络一

文章目录 深度神经网络 (DNN)1. 概述2. 基本概念3. 网络结构 深度神经网络的层次结构详细讲解1. 输入层&#xff08;Input Layer&#xff09;2. 隐藏层&#xff08;Hidden Layers&#xff09;3. 输出层&#xff08;Output Layer&#xff09;整体流程深度神经网络的优点深度神经…

[行业原型] 线上药房管理系统

​行业背景 据中国网上药店理事会调查报告显示&#xff1a;2011年&#xff0c;医药B2C的规模达到4亿元&#xff0c;仅出现5家销售额达5000万元的网上药店。而2011年医药行业的市场规模达到3718亿&#xff0c;线上药品的销售额还不到网下药店的一个零头&#xff0c;还有很大的发…