mysql宕机原因排查 日志 mysql数据库宕机怎么处理

WIKI系统宕机恢复：

由于WIKI系统为虚拟机环境，当出现问题时可直接使用镜像恢复。而且虚拟机环境故障率较低。

Mysql数据库宕机恢复：

mysql增量恢复必备条件：

*开启mysqllog-bin日志功能

mysql数据库开启了log-bin参数记录binlog日志功能如下：

[root@wikiDB~]# grep log-bin /data/3306/my.cnf 
log-bin= /data/3306/mysql-bin

*存在mysql数据库全备

宕机恢复解读：

如上图所示；我们的mysql数据库，每天凌晨00:00-01:00期间，对数据库进行分库备份。备份方式为不锁表备份，不影响线上用户查看资料。同时定时任务1个小时就对binlog日志进行一次远端推送，到WIKI虚拟主机上（至于为什么放在虚拟主机上，我是这样做的。虚拟主机首先关于硬件的故障是没有的，只要不是人为操作。那么它就很安全；而且虚拟主机备份起来很方便，做个镜像即可。当出现问题时，还原镜像；）。同时mysql数据库开启samba服务，允许备份服务器进行拷贝数据。也就是说我们同时做了双备份，当出现问题时，有多余的备份在手里。

宕机恢复步骤：

1）检查全备及binlog日志

[root@lamp3306]# ll /server/backup/

总计 148

drwxr-xr-x2 root root 4096 2013-06-17192.168.126.129
-rw-r--r--1 root root 136950 06-16 22:18 mysql_backup_2013-06-16.sql.gz
-rw-r--r--1 root root 140 06-16 22:18mysqllogs_2013-06-16.log
[root@lamp3306]# ll -rt /data/3306/mysql-bin.*
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000014
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000013
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000012
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000011
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000010
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000009
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000008
-rw-rw----1 mysql mysql 1292 06-16 22:18 /data/3306/mysql-bin.000007
-rw-rw----1 mysql mysql 415 06-16 22:40 /data/3306/mysql-bin.000015

增量日志的开始点，可以看时间的先后，进行判断。这里我们发现是22:40为最新的binlog。

立即刷新并备份出binlog

[root@lamp3306]# mysqladmin -uroot -p'oldboy' -S /data/3306/mysql.sock flush-logs
[root@lamp3306]# ll -rt /data/3306/mysql-bin.* 
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000014
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000013
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000012
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000011
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000010
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000009
-rw-rw----1 mysql mysql 149 06-16 22:18/data/3306/mysql-bin.000008
-rw-rw----1 mysql mysql 1292 06-16 22:18 /data/3306/mysql-bin.000007
-rw-rw----1 mysql mysql 106 06-16 22:51/data/3306/mysql-bin.000016
-rw-rw----1 mysql mysql 458 06-16 22:51/data/3306/mysql-bin.000015
[root@lamp3306]# cp mysql-bin.000015 /server/backup/

恢复binlog生成SQL语句

[root@lamp3306]# cd /server/backup/
[root@lampbackup]# mysqlbinlog mysql-bin.000015 >bin.sql #该命令为将二进制的binlog日志，转换为sql语句。
[root@lampbackup]# egrep -v "^#|^$|\*" bin.sql 
BINLOG'
M8m9UQ8BAAAAZgAAAGoAAAAAAAQANS4xLjYyLWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
AAAAAAAAAAAAAAAAAAAAAAAAEzgNAAgAEgAEBAQEEgAAUwAEGggAAAAICAgC
BEGIN
insertinto student values(0006,'xiaobao','man',29,'computer')
dropdatabase oldboy
DELIMITER;

可以看出，这个文件就是我们数据库的增量。也就是从0点备份到发现出问题期间的所有mysql数据库的操作。

提示：如果有多个库，此时：

mysqlbinlogmysql-bin.000016 -d oldboy >binlog.sql当然对于库也要分开进行备份，否则恢复的时候比较麻烦。

2）恢复凌晨全备

开始恢复，先回复凌晨全备，然后恢复整备到出问题时的所有增量数据。

解压全备文件

[root@lampbackup]# gzip -d mysql_backup_2013-06-16.sql.gz

开始恢复全备

[root@lampbackup]# mysql -uroot -p'oldboy' -S /data/3306/mysql.sock<mysql_backup_2013-06-16.sql
[root@lampbackup]# mysql -uroot -p'oldboy' -S /data/3306/mysql.sock -e "showdatabases;"
+--------------------+
|Database |
+--------------------+
|information_schema |
|baozi |
|chengcai |
|haole |
|lalala |
|mysql |
|oldboy |
|test |
|xiaobao |
+--------------------+
[root@lampbackup]# mysql -uroot -p'oldboy' -S /data/3306/mysql.sock -e "set namesgbk;select * from oldboy.student;"
+-----+-----------+------+------+--------------------+
| Sno| Sname | Ssex | Sage | Sdept |
+-----+-----------+------+------+--------------------+
| 1 | ???? | ?? | 24 | ?????ú???? |
| 2 | elain | ?? | 26 | computer applica |
| 3 | xiaozhang | ?? | 28| ???÷???í |
| 4 | jeacen | ?? | 20 | computer applica |
| 5 | ???? | ?? | 29 | ?????ú???§?????? |
+-----+-----------+------+------+--------------------+

3）恢复增量备份

然后我们进行恢复全备和增量备份：

[root@lampbackup]# mysql -uroot -p'oldboy' -S /data/3306/mysql.sock<mysql_backup_2013-06-16.sql 
[root@lampbackup]# mysql -uroot -p'oldboy' -S /data/3306/mysql.sock <bin.sql [root@lamp backup]# mysql-uroot -p'oldboy' -S /data/3306/mysql.sock -e "set names gbk;select * fromoldboy.student;"
+-----+-----------+------+------+--------------------+
| Sno| Sname | Ssex | Sage | Sdept |
+-----+-----------+------+------+--------------------+
| 1 | ???? | ?? | 24 | ?????ú???? |
| 2 | elain | ?? | 26 | computer applica |
| 3 | xiaozhang | ?? | 28| ???÷???í |
| 4 | jeacen | ?? | 20 | computer applica |
| 5 | ???? | ?? | 29 | ?????ú???§?????? |
| 6 | xiaobao | ma | 29 | computer |
+-----+-----------+------+------+--------------------+

现在我们恢复到了0点到出现问题时刻的全备数据。

注意：恢复时应严格按照步骤进行，提取最新的binlog日志。尽量减少数据的丢失。保证数据的完整。

转载于:https://blog.51cto.com/chengcai/1327912