mysql锁从实战中理解
mysql锁可能是数据库知识篇幅中普遍比较难理解的一个知识点!以前对锁理解的也是停留在八股文的的阶段,经历了这次生产问题之后重新学习了[吐血]问题表现:
早上刚到公司还没进入状态,就被拉进一个群(dba找上门了)说数据库有大量锁等待异常。
代码中的sql: delete from order_point_line_statistics where ep_id = 376330219 and created_at <= "2022-12-15 00:00:00"Error updating database. Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Deadlock found when trying to get lock; try restarting transaction ### The error may exist in class path resource [mybatis/mapper/ext/OrderPointLineStatisticsExtMapper.xml]
The error occurred while setting parameters ### SQL: delete from order_point_line_statistics where ep_id = ? and created_at <= ? ### Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Deadlock found when trying to get lock; try restarting transaction ; Deadlock found when trying to get lock; try restarting transaction; nested exception is com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Deadlock found when trying to get lock; try restarting transaction事故现场
场景是在并发消费kafka数据的时候,起了一个事务,事务里先插入今天的数据,然后删除数据;CREATE TABLE `ep` (
`id` bigint(11) NOT NULL AUTO_INCREMENT COMMENT "主键",
`ep_id` int(11) NOT NULL COMMENT "企业ID",
`name` varchar(255) NOT NULL COMMENT "名称",
`create_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT "创建时间",
`update_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT "修改时间",
PRIMARY KEY (`id`),
KEY `idx_ep_id` (`ep_id`) USING BTREE,
KEY `idx_create_at` (`create_at`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=9 DEFAULT CHARSET=utf8;
Session1
Session2
Locks
begin;
begin;
insert into ep(e_id, name, create_at) values(100, "stt", "2022-12-04 00:00:00");
insert into ep(e_id, name, create_at) values(100, "ssd", "2022-12-04 00:00:00");
select * from epG;
id: 1
e_id: 100
name: shijie
create_at: 2022-12-01 00:00:00
update_at: 2023-01-01 05:31:13
id: 2
e_id: 100
name: jianfeng
create_at: 2022-12-02 00:00:00
update_at: 2023-01-01 05:31:13
id: 3
e_id: 100
name: syx
create_at: 2022-12-03 00:00:00
update_at: 2023-01-01 05:31:13
id: 4
e_id: 100
name: stt
create_at: 2022-12-04 00:00:00
update_at: 2023-01-01 05:41:47
select * from epG;
id: 1
e_id: 100
name: shijie
create_at: 2022-12-01 00:00:00
update_at: 2023-01-01 05:31:13
id: 2
e_id: 100
name: jianfeng
create_at: 2022-12-02 00:00:00
update_at: 2023-01-01 05:31:13
id: 3
e_id: 100
name: syx
create_at: 2022-12-03 00:00:00
update_at: 2023-01-01 05:31:13
id: 5
e_id: 100
name: ssd
create_at: 2022-12-04 00:00:00
update_at: 2023-01-01 05:44:46
delete from ep where e_id=100 and create_at <= "2022-12-03 00:00:00";
lock waiting&dead lock
这里粘贴一张复现的图:
事故还原
初始化记录
两个session分别执行一条插入后查看的锁记录:
session1执行delete语句的锁记录:
此时session2的锁记录:
可以明显的看出:
表中最大的记录id是6,事务中插入的记录id是15,session1锁住的记录id最大到10,其实当我存量数据id是连续的时候,session1会把我刚插入的id也会锁住,这也是我一直不理解的地方。
google中提了一个问题:https://stackoverflow.com/questions/74972932/why-does-innodb-lock-more-records-when-range-deletion;大致回答的意思就是说:其实不管大范围还是小范围都一样 在根据ep_id和create_at筛选删除时,如果大范围时,会先挑ep_id=100先筛选 而且是边筛选边变锁,把筛到的结果就要锁住 ep_id=100的筛选结果包含session2的插入的数据 就锁等待了。思考:一:当我把delete语句中的时间范围缩小时,还是会锁住刚插入的记录吗?
答案是不会的,只会锁住符合条件的记录。 我想这也是符合预期的锁记录。二:思考
1)、把插入语句和删除语句调换位置
在事务中先执行删除,虽然说session2也会产生锁等待,但是session1同样可以提交不会报错
2)、删除不能使用二级索引,应尽量使用聚簇索引
3)、如果初始化记录中的id不连续,sessio1执行delete语句的时候是不是不会锁住插入的记录
Session1
Session2
Locks
begin;
begin;
insert into ep(e_id, name, create_at) values(100, "stt", "2022-12-04 00:00:00");
insert into ep(e_id, name, create_at) values(100, "ssd", "2022-12-04 00:00:00");
select * from epG;
id: 1
e_id: 100
name: shijie
create_at: 2022-12-01 00:00:00
update_at: 2023-01-01 05:31:13
id: 2
e_id: 100
name: jianfeng
create_at: 2022-12-02 00:00:00
update_at: 2023-01-01 05:31:13
id: 3
e_id: 100
name: syx
create_at: 2022-12-03 00:00:00
update_at: 2023-01-01 05:31:13
id: 4
e_id: 100
name: stt
create_at: 2022-12-04 00:00:00
update_at: 2023-01-01 05:41:47
select * from epG;
id: 1
e_id: 100
name: shijie
create_at: 2022-12-01 00:00:00
update_at: 2023-01-01 05:31:13
id: 2
e_id: 100
name: jianfeng
create_at: 2022-12-02 00:00:00
update_at: 2023-01-01 05:31:13
id: 3
e_id: 100
name: syx
create_at: 2022-12-03 00:00:00
update_at: 2023-01-01 05:31:13
id: 5
e_id: 100
name: ssd
create_at: 2022-12-04 00:00:00
update_at: 2023-01-01 05:44:46
delete from ep where e_id=100 and create_at <= "2022-12-02 00:00:00";
no lock 三:如何解决
先说下最终的解决方式是删除事务和删除动作;删除动作是通过另外的任务去执行。
金星护航月亮船22日晚将上演星月童话天文科普专家介绍,2月22日傍晚,西南方低空将上演浪漫一幕明亮的金星与极细的月牙近距离相伴,赏心悦目,煞是好看。金星伴月是最好看的星月童话,这是因为通常情况下,金星和月亮是夜空中最
唐景丽教书育人是初心也是使命视频加载中第十四届全国人大代表唐景丽,是河北省沧州市第十六中学校长党支部书记。从教二十七年,她默默耕耘三尺讲台,坚守为党育人为国育才的初心使命。走上校长岗位三年多来,唐景丽把学校当
14上帝的烛台上帝要从一些小孩子里面挑选出来几个,让他们成为天使。他来到人间,给每个小孩一人一个神奇的烛台,叫他们保持烛台光亮,一尘不染,说只有这样,烛光才会一直不灭。等过些日子的时候,他再来取
事关ChatGPT!紧急预警!ChatGPTChatGPT爆火!真真假假教你一眼识破三分钟教你练就火眼金睛最近有没有听过一个词ChatGPT每个人似乎都在谈论这个爆火的软件就像打开罐子释放出精灵一样围绕它的是无
2023iPad键盘平替品怎么选iPadProAir键盘有哪些?iPad键盘其实也算作一件提高生产力的工具,就像电容笔一样都是输入工具。电容笔适合在文本上涂涂画画,能提高用iPad在学习场景的效率。而键盘则是带可灵感创作体验mac操作或者课堂高
很多中国人正热衷把玩美国AI,却不知已落入一个情报巨网导读近年来,人工智能成为热议话题,美国许多智库也注意到其在情报领域的潜力。特别是人工智能对开源情报(Opensourceintelligence)的重要性日益凸显,美国情报界正密切
教人如何坐地铁买咖啡走红日常何以成爆款?文静子如何坐地铁如何吃麦当劳如何一个人去医院看病近日,短视频博主打工仔小张因拍摄都市生活日常而迅速出圈,一个月内涨粉百万,被网友戏称为社会生存学顶流。被绝大多数人视为日用而不觉的常
狂飙被人民日报点名,不是夸是批评,言辞犀利直戳剧方肺管!狂飙落幕有一段时间了。这部剧打响了2023年电视剧市场第一炮,刚开始效果一般,随着剧情的发展,剧如其名开始一路狂飙。热度和口碑甚至超过了去年现象级大爆的人世间,以及同题材扫黑风暴。
初春黄河2月19日,在黄河流域的陕西省渭南市合阳段拍摄的黄河滩涂(无人机照片)。最近,九曲黄河流经陕西省渭南市的合阳段春暖河开。新华社发(赵哓罡摄)2月19日,在黄河流域的陕西省渭南市合阳
17万次找寻和2万个团圆视频加载中(点击观看视频)01hr80后外卖骑手洪成木做外卖骑手这四年,我给很多家庭送过餐,也送了82个人回家吃团圆饭。寻人志愿者洪成木洪成木福建泉州的一名外卖骑手。2019年1月
两岸和平发展论坛反对台美勾连呼吁两岸恢复正常交流来源中国新闻网中新社台北2月20日电针对美国与台独分裂势力勾连挑衅升级破坏台海和平稳定,两岸和平发展论坛20日发表声明表示抗议与谴责,并呼吁推动两岸和平对话恢复正常交流。声明指出,