数据库90%的性能问题由于SQL引起,线上SQL的执行快慢,直接影响着系统的稳定性。
如果你刚入职一家公司,线上数据库CPU被慢SQL给打爆,而你又不敢直接将慢SQL杀死,万一出点事自己负连带责任。
退而求其次,利用MySQL 8.0资源组该功能,有效解决慢SQL引发CPU告警。
资源组的作用是资源隔离(你可以理解为开通云主机时勾选的硬件配置),将线上的慢SQL线程id分配给CPU一个核,让它慢慢跑,从而不影响CPU整体性能。
这里我封装了一个PHP脚本,简化了DBA输入相关资源组命令操作,直接在SHELL里运行即可。
该工具默认把执行时间超过10秒的慢SQL(SELECT|INSERT|UPDATE|DELETE|ALTER),捆绑在CPU最后一个核。
工具地址:https://github.com/hcymysql/imprison_rg
环境准备
shell> yum install -y php php-mysql
修改配置文件
######下面的配置信息修改成你自己的!!!######
shell> vim imprison_rg.php
$hostip='127.0.0.1';
$username='admin';
$password='hechunyang';
$dbname='test';
$dbport=3306;
$long_time=10; //执行时间10秒
部署在主库运行:
# php imprison_rg.php
关闭并删除资源组:
# php imprison_rg.php --stop
会在工具目录下生成slowlog.txt文件保存慢SQL
shell> cat slowlog.txt
2021-07-21 18:22:30
用户名:root
来源IP:localhost
数据库名:test
SQL语句:select sleep(3600)
资源组:slowsql_rg
执行时间:13 秒
注:资源组启动需开启CAP_SYS_NICE功能,并重启mysqld进程生效。
开启步骤如下:
shell> setcap cap_sys_nice+ep /usr/local/mysql/bin/mysqld
shell> getcap /usr/local/mysql/bin/mysqld /usr/local/mysql/bin/mysqld = cap_sys_nice+ep
shell> systemctl restart mysqld.service
验证:
使用top命令查看CPU状态信息,发现慢SQL已经绑定在CPU最后一核上运行。对于复杂、执行时间长、消耗资源多的慢SQL,我们可以将其设置特定的资源组,限制SQL查询的使用资源,避免导致其它正常查询不被响应,甚至导致MySQL直接hang住。