前言
删除表,你们下意识想到的命令多是直接使用DROP TABLE "表名",这是初生牛犊的作法,由于当要删除的表达空间到几十G,甚至是几百G的表时候。这样一条命令下去,MySQL可能就直接夯住了,外在表现就是QPS急速降低,客户请求变慢。mysql
解决办法
1.业务低峰时间手动执行删除
这个可能就须要DBA不辞辛劳,大晚上爬起来删表了。linux
2.先清除数据,最后再删除的方式
譬如1000万条数据,写脚本每次删除20万,睡眠一段时间,继续执行。这样也能作到对用户无感知。sql
3.对表文件(idb文件)作一个硬连接来加速删除
这个方法利用了linux下硬连接的知识,来进行快速删除,不记得话能够回去翻一下《鸟哥的linux私房菜》shell
ln data_center_update_log.ibd data_center_update_log.ibd.hdlk
[root@mysql01 sports_center]# ll
总用量 19903792
-rw-r----- 1 mysql mysql 9076 10月 17 13:15 data_center_update_log.frm
-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd
-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk
执行上面命令后,咱们就多了一个data_center_update_log.ibd.hdlk文件。此操做实际上不会占用磁盘空间,只是增长了一次对磁盘上文件的引用。
当咱们删除其中任何一个文件时,都不会影响磁盘上真实的文件,只是将其引用数目减去1。当被引用的数目变为1的时候,再去删除文件,才会真正作IO来删除它。
正是利用这个特色,将由原来mysql来删除大文件的操做,转换为一个简单的操做系统级的文件删除,从而减小了对mysql的影响。
4.登录mysql,执行drop表操做
很快,200万条数据只用了1秒完成,此操做是在建立硬连接后执行的
mysql> drop tables data_center_update_log;
Query OK, 0 rows affected (1.02 sec)
mysql> exit
Bye
退出来,再次查看数据目录,发现就只剩data_center_update_log.ibd.hdlk硬连接文件了
[root@mysql01 sports_center]# ll
总用量 19903792
-rw-r----- 2 mysql mysql 8447328256 12月 23 11:35 data_center_update_log.ibd.hdlk
5.如何正确删除ibd.hdlk硬连接文件呢
虽然drop table以后,剩下的硬连接文件已经和mysql没有关系了。但若是文件过大,直接用rm命令来删除,也是会形成IO开销飙升,CPU负载太高,进而影响到MySQL。
这里咱们用到的方法,能够循环分块删除,慢慢地清理文件,经过一个脚本便可搞定
Truncate命令一般用于将文件缩小或扩展到指定的大小。若是文件大于指定的大小,则会丢失额外的数据。若是文件较短,则会对其进行扩展,而且扩展部分的读数为零字节。
5.1 安装truncate命令
[root@mysql01 ~]# cruncate
-bash: cruncate: 未找到命令
一般操做系统会安装truncate命令,该命令在coreutils安装包里面,若是没有安装可使用下面命令安装
[root@mysql01 ~]# yum provides truncate
coreutils-8.22-24.el7.x86_64 : A set of basic GNU tools commonly used in shell scripts
源 :base
匹配来源:
文件名 :/usr/bin/truncate
能够看到truncate由coreutils安装包提供,下面安装coreutils安装包:
[root@mysql01 ~]# yum install -y coreutils
5.2 truncate经常使用选项
-c, --no-create --> 不建立任何文件
-o, --io-blocks --> 将大小视为存储块的数量,而不是字节
-r, --reference=RFILE --> 参考指定的文件大小
-s, --size=SIZE --> 按照指定的字节设置文件大小
5.3 truncate_bigfile.sh脚本
原理:使用truncate -s选项能够指定文件大小,经过脚本指定每次文件减小的大小,并sleep睡眠必定时间,从而达到可控的删除文件
附:truncate_bigfile.sh脚本
#! /bin/bash
#
TRUNCATE=/usr/bin/truncate
FILE=$1
if [ x"$1" = x ];then
echo "Please input filename in"
exit 1;
else
SIZE_M=$(du -sm "$1" | awk '{print $1}')
for i in $(seq "${SIZE_M}" -100 0)
do
sleep 1
echo "${TRUNCATE} -s ${i}M ${FILE}"
${TRUNCATE} -s "${i}"M "${FILE}"
done
fi
if [ $? -eq 0 ];then
\rm -f "${FILE}"
else
echo "Please check file"
fi

由于有悔,因此披星戴月;由于有梦,因此奋不顾身! 关注我,不走丢!