一次MySQL(INNODB存储引擎) 死锁捉虫记

前言

任何系统不管在什么阶段都需要关注生产环境错误日志,最近几个月内,发现偶尔会出现数据库死锁情况。以前碰到的数据库类错误大部分是SQL语法造成的错误,来到新东家之后才第一次碰到死锁情况,以前是搞游戏开发,现在是搞电商类开发,可能是不同的项目不同的业务的原因吧,查阅了各种资料后发现,是我想错了:(。一般业务瓶颈在数据库层,对于数据库层的问题需要重点关注,以为死锁这种情况是很严重的问题,这个要分情况,偶尔死锁对业务不会有太大的影响,我又想错了:(。

虫子发现
  第一次发现死锁很惊讶,这个是什么鬼?不知道是什么原因?不知道怎么解决?不知道会不会影响业务?没有搞清楚这个问题,生怕是业务的定时炸弹,每天心里不踏实。虫子发现如下:

死锁
  对数据库记录操作之前,当前线程需要先请求获得相关锁,获得锁之后才会执行SQL语句。锁根据粒度分为表锁和行锁(不是所有存储引擎都支持行锁),锁根据类型分为排他锁和共享锁(不同的操作需要获得的锁类型不同,不同的锁类型行为也不相同)。资源越少,出现死锁的概率会更小,比如只支持表锁的存储引擎会比支持行锁的存储引擎出现的概率更小。
  并发事务出现时,当出现多个事务间彼此等待对方资源释放,事务因没有处理完,已经获得锁的资源不会释放,大家彼此这样等待着僵持着,这样会一直下去,死锁就这样产生了。
  死锁现象关系型数据库无法避免,不是MySQL 数据库独有。MySQL 数据库会自动检查死锁情况,当发现时,会回滚更简单的事务并返回给线程一个错误。怎么判断哪个事务更简单呢,根据事务影响的纪录行数判断,纪录行数越小被认为更简单。

诊断分析
  当出现死锁时,为了解决这个问题,需要诊断分析当时出现死锁的上下文信息以及相关的执行语句,这样才能知道怎么避免。MySQL 数据库只保存最近一次的死锁事务,如果同时有超过2个事务出现死锁,至多只保存2个事务信息。执行MySQL 客户端命令:SHOW ENGINE INNODB STATUS获得最近一次事务死锁相关信息。如果是MySQL 5.6之后的版本,可以打开全局变量innodb_print_all_deadlocks=ON,这样死锁相关信息会保存到MySQL 错误日志中。如果是不支持这个变量的版本,可以采用定时执行客户端命令采集死锁信息,然后保存到日志文件中,每个事务都有唯一编号,可以根据这个去重。当死锁频繁出现时,需要引起注意;当偶尔出现时,可以不用关注。死锁信息格式如下,不同MySQL 版本内容会有点差异,相关说明可以查看参考资料一。

预防措施
  知道死锁为何物,以及通过分析诊断日志信息,就可以对症下药了,但是有一些通用的基本原则可以遵守:
  1 尽可能保持事务简单以及快速执行;
  2 尽可能保持事务影响行数少以及涉及的相关表少;
  3 避免使用外键约束,其实大部分应用允许数据冗余的;
  4 影响行数大的事务尽量使用相同的排序过滤;
  5 数据库并发不高的业务,可以通过某种方式顺序执行语句,一次只执行一个,通过查资料知道一种实现方式:创建一个表,这个表始终只有一条纪录,各个事务通过争夺这个锁来实现线性执行,感觉这个应该没啥用:(;
  6 有些场景死锁会检查不到,设置锁的过期时间就很重要了,MySQL可以通过设置选项innodb_lock_wait_timeout;

危害程度
  锁资源得不到及时释放,会影响数据库并发处理,如果经常出现死锁,需要及时采取措施处理,如果只是偶尔出现,业务逻辑捕捉到死锁错误可以采取重试执行事务,对业务不会有什么影响,总之具体问题需要具体分析:)

后记
  一开始遇到这个问题有点紧张,以为是很严重的问题,无从下手,不了解相关的背景知识嘛,看来人丑还是要多读书啊(:(:

参考资料
【1】How to deal with MySQL deadlocks
https://www.percona.com/blog/2014/10/28/how-to-deal-with-mysql-deadlocks/
【2】deadlock
http://dev.mysql.com/doc/refman/5.7/en/glossary.html#glos_deadlock
【3】Deadlock Detection and Rollback
http://dev.mysql.com/doc/refman/5.7/en/innodb-deadlock-detection.html
【4】 How to Cope with Deadlocks
http://dev.mysql.com/doc/refman/5.7/en/innodb-deadlocks.html

时间: 2024-12-12 12:46:55

一次MySQL(INNODB存储引擎) 死锁捉虫记的相关文章

mysql innodb存储引擎的聚集索引

InnoDB聚集索引 MySQL有没有支持聚集索引,取决于采用哪种存储引擎. MySQL InnoDB一定会建立聚集索引,所谓聚集,指实际数据行和相关的键值保存在一块,这也决定了一个表只能有一个聚集索引,即MySQL不会一次把数据行保存在二个地方.InnoDB通常根据主键值(primary key)进行聚集,但是当一个表没有PK怎么办?InnoDB选取聚集索引参照列的顺序是: 1.如果声明了主键(primary key),则这个列会被做为聚集索引2.如果没有声明主键,则会用一个唯一且不为空的索引

MySQL InnoDB存储引擎之锁

概念: 锁是用来管理对共享文件的并发访问.innodb会在行级别上对数据库上锁.不过innodb存储引擎会在数据库内部其他多个地方使用锁,从而允许对不同资源提供并发访问.例如操作缓冲池中的LRU列表,删除,添加,移动LRU列表中的元素,为了保证一致性,必须有锁的介入.MyISAM引擎是表锁,而InnoDB提供一致性的非锁定读.行级锁,且行级锁没有相关额外的开销. 锁 table-level locking(表级锁) 整个表被客户锁定.根据锁定的类型,其他客户不能向表中插入记录,甚至从中读数据也受

MySQL InnoDB存储引擎排它锁和共享锁的研究

1,共享锁实验 session1 在session1建表lisa并插入数据 mysql> create table lisa(name char(10),age int(5)); mysql> insert into lisa values('lisa','26'); 加给age=26这一行加共享锁 mysql> set autocommit=0; mysql> select * from lisa where age=26 lock in share mode; mysql>

MySQL InnoDB存储引擎

MySQL对应InnoDB版本 MySQL 5.1>InnoDB 1.0.X MySQL 5.5>InnoDB 1.1.X MySQL 5.6>InnoDB 1.2.X 后台线程 1.Master Thread 负责将缓冲池中的数据异步刷新到磁盘,保证数据的一致性:包括刷新脏页.合并插入缓冲.undo页的回收. 2.IO Thread innodb存储引擎中大量使用了AIO(Async IO)来处理写IO请求来提高数据库的并发性能,共有四类IO线程,分别是:insert buffer t

MySQL Innodb 存储引擎学习篇

master thread的县城优先级别最高.其内部由几个循环(loop)组成:主循环(loop).后台循环(background loop).刷新循环(flush loop).暂停循环(suspend loop).master thread 会根据数-据库运行的状态在loop,background loop.flush loop 和suspend loop 中进行切换.                每秒一次的操作:        1.日志缓冲刷新到磁盘,即使这个事务还没有提交(总是).   

MySQL InnoDB存储引擎undo redo解析

本文是介绍MySQL数据库InnoDB存储引擎重做日志漫游 00 – Undo Log Undo Log 是为了实现事务的原子性,在MySQL数据库InnoDB存储引擎中.还用Undo Log来实现多版本号并发控制(简称:MVCC). - 事务的原子性(Atomicity) 事务中的所有操作,要么所有完毕,要么不做不论什么操作.不能仅仅做部分操作. 假设在运行的过程中发生 了错误,要回滚(Rollback)到事务開始前的状态,就像这个事务从来没有运行过. - 原理 Undo Log的原理非常ea

MySQL InnoDB存储引擎之表(二)

本篇是继续上一篇未完的部分继续说的. 4.InnoDB数据页结构 页是InnoDB存储引擎管理数据库的最小磁盘单位.页类型为B-tree Node的页存放的就是表中行的实际数据.页由以下七个部分组成:File Header(文件头).Page Header(页头).Infimun和Supremum Records.User Records(行记录).Free Space(空闲空间).Page Directory(页目录)和File Trailer(文件尾).  如下图: 其中File Heade

MySQL InnoDB存储引擎之表(一)

主要介绍InnoDB存储引擎表的逻辑存储以及实现.重点介绍数据在表中是如何组织和存放的. 1.索引组织表(index organized table) 在InnoDB存储引擎中,表都是根据主键顺序组织存放的,这种存储方式的表叫索引组织表.在InnoDB存在引擎表中,每张表都有个主键(Primary key),如果在创建表时没有显示定义主键,则会按照如下方式选择或者创建主键:a.判定是否有非空的唯一索引(unique not null),如果有则该列即为主键.若果有多个,则选择建表是第一个定义的非

mysql innodb存储引擎介绍

innodb存储引擎1.存储:数据目录.可以通过配置修改 存储文件:frm,ibd结尾的文件.frm存储表结构,ibd存储索引和数据 存储日志:ib_logfilen文件 2.innodb存储引擎开启或关闭: 关闭innodb_fast_shutdown= 0 完成所有的full purge和merge insert buffer操作(如:做InnoDB plugin升级时) 1 默认,不需要完成上述操作,但会刷新缓冲池中的脏页 2 不完成上述两个操作,而是将日志写入日志文件,下次启动时,会执行

MySQL InnoDB 存储引擎探秘

在MySQL中InnoDB属于存储引擎层,并以插件的形式集成在数据库中.从MySQL5.5.8开始,InnoDB成为其默认的存储引擎.InnoDB存储引擎支持事务.其设计目标主要是面向OLTP的应用,主要特点有:支持事务.行锁设计支持高并发.外键支持.自动崩溃恢复.聚簇索引的方式组织表结构等. 体系架构 InnoDB存储引擎是由内存池.后台线程.磁盘存储三大部分组成. 线程 InnoDB 使用的是多线程模型, 其后台有多个不同的线程负责处理不同的任务 Master Thread Master T