21 | 为什么我只改一行的语句,锁这么多?
21 | 为什么我只改一行的语句,锁这么多?
讲述:林晓斌
时长17:38大小16.16M
案例一:等值查询间隙锁
案例二:非唯一索引等值锁
案例三:主键索引范围锁
案例四:非唯一索引范围锁
案例五:唯一索引范围锁 bug
案例六:非唯一索引上存在"等值"的例子
案例七:limit 语句加锁
案例八:一个死锁的例子
小结
上期问题时间
赞 110
提建议
精选留言(336)
- 古娜拉黑暗之神·巴啦...置顶2019-01-03老师,您好。假期的没跟上,今天补到了这节课,看了之后有几点不是太明白。望能解答一下。 1. 索引c上的锁算不算是行锁。假如索引c上的next-key lock为(0,5] (5,10],那么5算不算是c上的行锁? 2. 在案例六中,执行 “delete from t where c=10;” 语句,索引c上的next-key lock是(5,10],(10,10],(10,15)。那么主键索引上的锁是什么呢?是只有行锁,锁住的是 (10,10,10) 和 (30,10,30) 两行吗? 3. 也是在案例六中,session A不变,在session B中执行 “update t_20 set d=50 where c=5;”、“update t_20 set d=50 where c=15;”、“insert into t_20 values(40,15,40);”均执行成功,但执行“insert into t_20 values(50,5,50);” 时,却被阻塞。为什么呢?具体执行语句如下 session A mysql> begin; mysql> explain delete from t_20 where c=10; id select_type table partitions type possible_keys key key_len ref rows filtered Extra 1 DELETE t_20 range c c 5 const 2 100 Using where mysql> delete from t_20 where c=10; session B mysql> update t_20 set d=50 where c=5; Query OK, 1 row affected (0.01 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> update t_20 set d=50 where c=15; Query OK, 1 row affected (0.00 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> insert into t_20 values(40,15,40); Query OK, 1 row affected (0.00 sec) mysql> explain insert into t_20 values(50,5,50); +----+-------------+-------+------------+------+---------------+------+---------+------+------+----------+-------+ | id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra | +----+-------------+-------+------------+------+---------------+------+---------+------+------+----------+-------+ | 1 | INSERT | t_20 | NULL | ALL | c | NULL | NULL | NULL | NULL | NULL | NULL | +----+-------------+-------+------------+------+---------------+------+---------+------+------+----------+-------+ 1 row in set (0.00 sec) mysql> insert into t_20 values(50,5,50); (block) 我使用的mysql版本是:5.7.23-0ubuntu0.16.04.1 show variables的结果太多,我截取了一部分,或许对您分析有帮助: innodb_version 5.7.23 protocol_version 10 slave_type_conversions tls_version TLSv1,TLSv1.1 version 5.7.23-0ubuntu0.16.04.1 version_comment (Ubuntu) version_compile_machine x86_64 version_compile_os Linux展开
作者回复: 1. Next-key lock 就是间隙锁➕行锁,所以包含=5这一行 2. 对 3. (c=5,id=50)是在这个gap里哦,你试试插入(1,5,50)对比一下。好问题
共 28 条评论64 - 张三2018-12-31Happy New Year !这个专栏绝对是极客时间最好我买过最值的专栏。共 3 条评论251
- Chu~♡·の~2019-01-02是不是可以总结为: 1、查询过程中访问到的对象才会加锁,而加锁的基本单位是next-key lock(前开后闭); 2、等值查询上MySQL的优化:索引上的等值查询,如果是唯一索引,next-key lock会退化为行锁,如果不是唯一索引,需要访问到第一个不满足条件的值,此时next-key lock会退化为间隙锁; 3、范围查询:无论是否是唯一索引,范围查询都需要访问到不满足条件的第一个值为止;展开
作者回复: 嗯嗯,可以的👍🏿
共 6 条评论148 - Jayden 王凯豪2019-11-05跟Oracle 确认过了,唯一索引范围锁的bug在最新的8.0.18已经修复!共 5 条评论121
- undifined2019-01-07遇到一个有趣的问题,在老师的解答下终于弄明白了: CREATE TABLE z ( id INT PRIMARY KEY AUTO_INCREMENT, b INT, KEY b(b) ) ENGINE = InnoDB DEFAULT CHARSET = utf8; INSERT INTO z (id, b) VALUES (1, 2), (3, 4), (5, 6), (7, 8), (9, 10); session A BEGIN; SELECT * FROM z WHERE b = 6 FOR UPDATE; session B INSERT INTO z VALUES (0, 4); 这里为什么会被锁住 答案比较长,写在我自己的笔记里了,地址是 https://helloworlde.github.io/blog/blog/MySQL/MySQL-%E4%B8%AD%E5%85%B3%E4%BA%8Egap-lock-next-key-lock-%E7%9A%84%E4%B8%80%E4%B8%AA%E9%97%AE%E9%A2%98.html 大家可以看看展开
作者回复: 好问题,质量很高的笔记
共 50 条评论118 - Geek_9ca34e2019-01-09老师,你好: 我练习实例的时候发现一个问题:如 案例五:唯一索引范围锁 bug begin; select * from t where id>10 and id<=15 for update; 1、执行如上语句加锁范围(10,15]和(15,20]; 2、因为10未加锁,所以我单独再开一个连接,执行delete from t where id=10;不会锁等待,能正常删除; 3、但是我再执行insert into t values(10,10,10); 语句会等待,无法正常执行; 4、经过分析我发现第一个连接执行的语句的加锁范围已经变成(5,15]和(15,20],代表锁蔓延了;这是什么原因呢?展开
作者回复: 好问题,我会加到答疑文章中, Gap是一个动态的概念
共 6 条评论74 - HuaMax2019-01-01首先老师新年快乐,学习专栏受益良多! 上期问过老师的问题已了解答案,锁是加在索引上的。再尝试回答问题。c上是普通索引,根据原则2,访问到的都要加锁,在查询c>=15这个条件时,在查找到15后加锁(10,15],继续往右查找,按理说不会锁住6这个索引值,但查询语句中加了order by c desc,我猜想会优化为使用c<=20这条语句,查找到20后往左查找,这样会访问到15左边的值10,从而加锁(5,10],不知我理解对否?展开
作者回复: 新年好 对的👍🏿
共 13 条评论56 - 时隐时现2019-01-30不好意思,这次又来晚了,看这种连载技术文章,和看小说一样,养肥了集中看~~ 这次的问题如下,希望丁老师有空解答一下。 版本:mysql 5.6.39 CREATE TABLE `t` ( `a` int(11) NOT NULL, `b` int(11) DEFAULT NULL ) ENGINE=InnoDB DEFAULT CHARSET=utf8; insert into t values(1,1),(2,2),(3,3),(4,4),(5,5); 采用READ-COMMITTED隔离级别 案例1、 session A: begin; update t set a=6 where b=1; session B: begin; update t set a=7 where b=2; A和B均能执行成功 问题1:官档上说对于RC且全表扫描的update,先逐行添加行锁然后释放掉不符合where条件的,那么session A成功对(1,1)加锁,理论上session B在扫描(1,1)并尝试加锁时会被阻塞,为何还能执行成功?官档链接:https://dev.mysql.com/doc/refman/8.0/en/innodb-transaction-isolation-levels.html 案例2: session A: begin; update t set a=6 where b=1; session B: begin; delete from t where b=2; -- 被阻塞 问题2:为何案例1 中的session B不会被阻塞,而案例2的却被session A的行数阻塞,update和delete都是全部扫描,难道加锁机制不一样?展开
作者回复: 好问题,在read-commited隔离级别下,update语句 有一个“semi-consistent” read优化, 意思是,如果update语句碰到一个已经被锁了的行,会读入最新的版本,然后判断一下是不是满足查询条件, a)如果不满足,就直接跳过; b) 如果满足,才进入锁等待 你的第二个问题:这个策略,只对update有效,delete无效 新春快乐~
共 8 条评论40 - Leon📷2019-01-29老师,案例八session B的操作语句update t set d = d + 1 where c =10; 由于c是非唯一键索引,锁(5,10」可以理解 ,为什么不锁(10,15} 呢,不是应该继续向后扫描直到第一个不满足条件的值为止吗
作者回复: 好问题,新年快乐 会锁的,只是因为在(5,10]就被锁住了,所以后面的锁加不上去了😆
共 9 条评论34 - 陈2019-01-11老师在案列一中update t set d=d+1 where id=7 中id是主键也是唯一索引,按优化1应该退化成行锁才对,为什么insert into t values(8,8,8)会被锁住,我是那儿理解错了?
作者回复: 这一行存在的时候是行锁,这一行不存在,那就是间隙锁啦。 insert into t values(8,8,8)是被主键上(5,10)的间隙锁锁住的
共 6 条评论31 - 看不到de颜色2019-02-25老师您好。在自己跑案例四的时候,回想起之前MVCC的内容就对案例做了些调整,此时产生一些有关一致性试图的疑惑,还想请老师排疑解惑。 MySQL8.0.13,RR隔离级别下,表结构及数据按照例子中不变,执行语句如下: session A:begin; select * from t where c>=10 and c<11 for update; --锁住(5,15] session B:update t set d=d+1 where c=5; --成功,changed:1 session A:select * from t; --读到d=6 此时,session A居然读到了session B update后的结果。语句调整后,把session A中的 for update去掉,依据RR级别下一致性视图原理不会读到session B更新后的结果。 那么,是否可以理解begin后执行的select语句使用for update/lock in share mode并不会生成一致性视图呢? 还请老师指点迷津,感激不尽(❁´ω`❁)展开
作者回复: 确实是这样的, 一致性视图的生成时间是 第一次执行一致性读的时候
共 11 条评论26 - 约书亚2018-12-31早晨睡不着打开极客时间一看,竟然更新了。今天是周日而且在假期中哎...
作者回复: 风雨无阻 节假日不休,包括元旦和春节😄
共 2 条评论26 - 乾坤2019-01-01您好,关于"优化 2:索引上的等值查询,向右遍历时且最后一个值不满足等值条件的时候,next-key lock 退化为间隙锁。",我觉得改为"从第一个满足等值条件的索引记录开始向右遍历到第一个不满足等值条件记录,并将第一个不满足等值条件记录上的next-key lock 退化为间隙锁"更明确些
作者回复: 感觉没大差别,嗯嗯,理解就好😄
共 2 条评论24 - 王伯轩2019-04-06这两章今天来来回回啃了好几遍,终于感觉有关锁的知识成体系了。 尤其是总结的加锁原则,简直太精辟了,感谢丁老师. 原则 2:查找过程中访问到的对象才会加锁。 对于原则2 我有个疑问,访问到的对象应该还应该包含其影响到的索引。 老师的例子中某些隐含了这些东西,其他同学的留言中也表明了这点,望老师指点 比如 一个表t(id ,c,d,e) id是主键 ,其他列都有非唯一索引。 执行insert 需要获取所有索引上的锁; 执行删除(即使根据id删除)也需要获取其他索引的锁; 执行update(即使where条件使用id)如果更新的有索引列,也需要获取上面的锁 因为更新操作肯定会导致索引树的修改,如果不更改,会导致索引搜索时返回的数据和实际不一样;如果更改的话,肯定需要防止并发就需要加锁 不知道理解的是否正确展开
作者回复: 对的,要update和delete的时候,要“先读后写”,这个读就开始加锁了。 insert的时候要有插入意向锁(就是会跟gap lock冲突的那个)
共 2 条评论20 - 郭江伟2018-12-31老师这次的留下的问题,语句跟上次不一样,上期问题语句是select id from t where c>=15 and c<=20 order by c desc for update;;这次缺少了 order by c desc ,不加desc的话insert into t values(6,6,6);不会被堵塞; 根据优化3:索引上的等值查询,在向右遍历时且最后一个值不满足等值条件的时候next-key lock退化为间隙锁; 问题中的sql语句加了desc ,是向左扫描,该优化用不上,所以下限10是闭区间,为了防止c为10的行加入,需要锁定到索引c键(5,5) 此例中insert into t values(6,5,6) 会堵塞,insert into t values(4,5,6) 不会堵塞,展开
作者回复: 嗯你说的对 不过是我少打一个词了,加上去了,要desc哦 重新分析下😄
共 2 条评论17 - Flash2020-02-06猜想是因为多了一个order by c desc,找到第一个等值查询c=20,加锁(15,20],因为c不是唯一索引,所以不会优化、退化成行锁。继续向左,等值查到c=15,加锁(10,15],直到找到c=10,不满足条件c>=15,根据原则2,扫描到的都要加锁,所以最后加锁(5,10],因为是范围查询不会优化。所以,最后session A的加锁范围是(5,20],即(5,10],(10,15],(15,20]。共 3 条评论13
- 是我的海2019-01-31全是干货赞赞赞,以后出去面试再也不怕面试官装X问锁的问题了
作者回复: 一定要低调哈😆 如果面试的时候能够让大家回答更有底气,那就太好啦👍
共 3 条评论12 - 信信2019-01-07老师您好,自己基于文中开头的表做了一个实验, session1: mysql> begin; mysql> explain select c from t where c >5 lock in share mode; 分析:(5,10],(10,15],(15,20],(20,25],(25,正无穷)有锁。 session2: mysql> update t set c = 5 where c = 1;#(执行成功) mysql> update t set c = 1 where c = 5;#(执行成功) mysql> update t set c = 5 where c = 1;#(阻塞) 最后一条阻塞,无法用原理分析,肯请老师解答。展开
作者回复: 第二个语句把第一个gap变成(1,10]了 第三个update的逻辑里面,包含了“要插入一个c=5的行” 好问题
共 3 条评论11 - 滔滔2019-01-03老师,如果加了关键字desc,是不是文中的优化规则依然有效,只是左开右闭区间变成了右开左闭区间,向右扫描变成了向左扫描,这样理解对吗?🤔
作者回复: 向右扫描变成了向左扫描, 前开后闭还是前开后闭😄 规则还有效的 好问题
10 - 鸠翱2019-01-10老师我今天在回顾的时候又想到一个新问题,为什么RR级别下要以next-key lock作为加锁的基本单位呢? 比如说案例5中的那个例子,我将其修改成select * from t where id > 10 and id < 15 for upadate,按照加锁规则,需要对(10,15]上锁,那么按照逻辑来看,15的那个行锁其实没必要的(难道是有必要的嘛?),既然next-key lock本质也是先加间隙锁再加行锁,为什么非要把那个行锁也加上,就是因为next-key lock是加锁基本单位嘛?展开
作者回复: 代码实现上是这样子的。。
共 2 条评论9