这篇博客的文章内容发生于某天晚上服务端日志报了一大堆 Deadlock found when trying to get lock; try restarting transaction,当时通过字面意思果断可以判断出是Sql事务死锁了,与此同时,MySql所在服务器CPU也远超100%,第一直觉是事务死锁导致线程阻塞,请求数瞬间过多导致CPU超100%。

mysql事务打满了拒绝连接 mysql事务阻塞_数据

什么情况下会导致死锁呢?根据以往经验,应该是同时操作了(update/delete等)同一条数据库的记录导致了事务阻塞,由于事务的执行时间过长导致了其他事务的等待,导致CPU攀高。

死锁这个问题基本上可以说涉及了InnoDB大部分特性:行锁设计,非锁定读,事务,MVCC,聚簇索引 等等,有必要写篇文章好好分析下。

若要全方面解决InnoDB死锁问题,我们需要对下面几个方面了如指掌。

MVCC

事务的隔离级别

快照读和当前读

聚簇索引

死锁

INNODB_TRX,INNODB_LOCKS,INNODB_LOCK_WAITS

MVCC

多版本并发控制是指InnoDB存储引擎通过行多版本的方式来读取当前执行时间数据库中的行数据,简单说就是读不加锁,读写不冲突。这样会极大的增加数据库的并发性能。有人问了,读不加锁,那么写会加锁的啊,这个时候再同时进行读能正常读取吗,答案是肯定的,读取操作不会因为锁没释放而等待,而是会去读取行的一个快照数据(不同事务的隔离级别,访问的快照数据不同)。

事务的隔离级别

Read Uncommited
Read Çommited
Repeatable Read
Serializable

其中,Read Uncommited 和 Serializable 比较极端,前一个可以读取未提交的记录,后一个读写冲突,并发性低,所以两者在一般情况下都不建议使用,用的最多是RC和RR。

RC级别有关键词:最新数据RR级别的关键词:最初数据

我们来看具体的例子,我们模拟两个并发事务请求,分别是:

Connection A:
start TRANSACTION;
select * from tDeadLock where id = 1;
Connection B:
start TRANSACTION;
update tDeadLock set count=count+1 where id = 1;

在说这两个请求之前,我们先看tDeadLock这个测试表的结构

id (Primary Key 下同)
count
1
1

我们再回头看两个Connection,A事务中已经开始事务,读取了id=1的数据,但是没有结束事务,同时B中进行并发访问,将id=1的count加1,两者事务都没有提交,因为进行了update,id=1的加了一个x锁,在A连接进行读取的过程中,RC和RR事务的隔离级别下,会使用非锁定一致性读。当A事务未关闭,B事务进行commit后,在RC和RR情况下A事务显示的结果就不一样了。

1、RC

在当前两个连接开始之前先执行下面两句,强制使用RC事务隔离级别。

SET @@global.tx_isolation = 'READ-COMMITTED';
SET SESSION tx_isolation = 'READ-COMMITTED';

可以使用下面命令验证是否修改成功。

SELECT @@global.tx_isolation;
SELECT @@tx_isolation;

RC事务隔离级别的关键词是: 最新数据,所以当B事务进行了commit,在A事务中进行查询会显示count的值为2。

2、RR

同理我们强制使用RR事务隔离级别。

SET @@global.tx_isolation = 'REPEATABLE-READ';
SET SESSION tx_isolation = 'REPEATABLE-READ';

RR事务隔离级别的关键词是:最初数据,所以当B事务进行了commit,在A事务中进行查询的会显示count依然为1。

快照读和当前读

可以这么认为除select外是快照读(select for update,select lock in share mode特殊除外),其他都可以认为是当前读。读取的是记录的最新版本数据,为了保证并发的时候读取的是最新数据需要对改记录进行X锁。

我们来看下例子,在之前的tDeadLock表增加一条记录

id
count
1
1
2
1

RR事务隔离级别

我们来看具体的例子,我们模拟两个并发请求,分别是:

Connection A:
start TRANSACTION;
select * from tDeadLock;
id
count
1
1
2
1
Connection B:
update tDeadLock set count=count+1 where id = 1;

在事务A中继续执行

select * from tDeadLock for update;
id
count
1
2
2
1

当前读,查询到的是获取更新过后的数据,我们再在事务A中运行

select * from tDeadLock;
id
count
1
1
2
1

快照读,获取的是当前事务之前的快照。可以看出不同的事务隔离级别下,快照读和当前读获取的数据是不一样的。(因为RC获取最新数据,RR是获取最初数据,两个概念一结合就比较好理解了。)

死锁

文章开头解释了为什么会导致CPU 100%,但是就算100%,并发访问量比较大,也只是处理会变慢而已,为什么会产生死锁呢?

唯一的可能是多个进程在互相竞争资源,互相对方需要的资源不释放,导致死锁,我们还是回头来看那个例子。

Connection A:
start TRANSACTION;
select * from tDeadLock where id = 1 for update;
id
count
1
1
Connection B:
start TRANSACTION;
select * from tDeadLock where id = 2 for update;
id
count
2
1

这两个事务都在所查询的记录上加了X锁,如果事务A继续执行下面这句Sql,会出现阻塞状态。

select * from tDeadLock where id = 2 for update;

这个时候事务B继续执行事务A加锁的id=1这条记录。就会出现死锁状态,事务A和事务B明显的在竞争资源。当发生死锁的时候,事务B会进行回滚,这个时候事务又可以继续执行完成。

INNODB_TRX, INNODB_LOCKS, INNODB_LOCK_WAITS

这个时候,我们再来看和锁相关的表:

INNODB_TRX

事务表,正在运行的事务都会显示

trx_id 事务id

trx_state 事务状态

trx_requested_lock_id 等待事务锁id

trx_weight 事务权重

trx_mysql_thread_id mysql中的线程id

trx_query 事务运行的sql语句

INNODB_LOCKS

锁表

lock_index 锁的索引

lock_space INNODB存储引擎表空间的ID号

lock_page 被锁住的页数量

lock_rec 被锁住的行数量

lock_data 被锁住的行主键值

INNODB_LOCK_WAITS

锁等待表

requesting_trx_id 申请锁事务ID

request_lock_id 申请的锁

blocking_trx_id 阻塞事务ID

blocking_lock_id 阻塞锁的ID

其中 trx_mysql_thread_id 这个id,如果特殊情况,可以根据show full processlist命令查询出来进程id来kill掉,具体表的使用可以参考之前的例子来看下各个表的数据。

总结 当了解死锁背后一些原理后,处理起死锁问题就有迹可循了。

写程序的时候可以尽量避免事务的过长(处理时间)

写事务的时候避免相互竞争资源的情况