对关系型数据库来说,日志是很重要的一个组件,而且可能不同的日志有着不同的功能。MySQL中就有着各种不同的日志,一直打算梳理下,碰巧看到GreatSQL刊载了相关日志的文章,借鉴学习一下。

首先,了解下General Query Log,原文链接:《图文结合带你搞懂MySQL日志之General Query Log(通用查询日志)》

什么是通用查询日志?

通用查询日志(General Query Log) 用来记录用户的所有操作,包括启动和关闭MySQL服务、所有用户的连接开始时间和截止时间、发给MySQL数据库服务器的所有SQL指令等。

当我们的数据发生异常时, 查看通用查询日志,还原操作时的具体场景,可以帮助我们准确定位问题。

查看当前状态,

mysql> SHOW VARIABLES LIKE '%general%';
+------------------+---------------------------+
| Variable_name    | Value                     |
+------------------+---------------------------+
| general_log      | OFF                       |
| general_log_file | /var/lib/mysql/zhyno1.log |
+------------------+---------------------------+
2 rows in set (0.00 sec)

从general_log可以看到通用查询日志处于关闭状态,从general_log_file可以看到日志的目录以及文件名称。

启动日志

  • 方式1

修改my.cnf或者my.ini配置文件来设置。在[mysqld]组下加入log选项,并重启MySQL服务。格式如下,

[mysqld]
general_log=ON
general_log_file=[path[filename]] #日志文件所在目录路径,filename为日志文件名

如果不指定目录和文件名,通用查询日志将默认存储在MySQL数据目录中的hostname.log文件中,hostname表示主机名。

  • 方式2
SET GLOBAL general_log=on;  # 开启通用查询日志
SET GLOBAL general_log_file='path/filename'; # 设置日志文件保存位置

查看日志

通用查询日志是以文本文件的形式存储在文件系统中的,可以使用文本编辑器直接打开日志文件。每台MySQL服务器的通用查询日志内容是不同的。

  • 在Windows操作系统中,使用文本文件查看器;
  • 在Linux系统中,可以使用vi工具或者gedit工具查看;
  • 在Mac OSX系统中,可以使用文本文件查看器或者vi等工具查看。
[root@zhyno1 mysql]# cat zhyno1.log
/usr/sbin/mysqld, Version: 8.0.25-16 (GreatSQL (GPL), Release 16, Revision 8bb0e5af297). started with:
Tcp port: 3306  Unix socket: /var/lib/mysql/mysql.sock
Time                 Id Command    Argument
2022-11-24T10:07:31.300579Z  4398 Query SHOW VARIABLES LIKE '%general%'
2022-11-24T10:07:42.344537Z  4398 Query SET GLOBAL general_log=OFF

可以看出,该日志非常清晰地记录了客户端的所有行为。

停止日志

修改my.cnf或者my.ini文件,将[mysqld]组下的general_log值设置为OFF或者把general_log一项注释掉。修改保存后,再重启MySQL服务,即可生效。

[mysqld]
general_log=OFF

或是,

SET GLOBAL general_log=off;

删除\刷新日志

如果数据的使用非常频繁,那么通用查询日志会占用服务器非常大的磁盘空间。数据管理员可以删除很长时间之前的查询日志,以保证MySQL服务器上的硬盘空间。

在MySQL中,可以使用mysqladmin命令来开启新的通用查询日志。新的通用查询日志会直接覆盖旧的查询日志,不需要再手动删除了。

mysqladmin命令的语法如下,

mysqladmin -uroot -p flush-logs

需要注意的是,如果希望备份旧的通用查询日志,必须先将旧的日志文件拷贝出来或者改名。然后,再执行mysqladmin命令。

除了上述方法之外,还可以手工删除通用查询日志。删除之后需要重新启动MySQL服务。重启之后就会生成新的通用查询日志。如果希望备份旧的日志文件,可以将旧的日志文件改名,然后重启MySQL服务。

可以将这些操作写到脚本中,作为标准化流程。

但是很多线上的数据库,应该都是关闭General Query Log的,大多因为资源消耗的问题。最近就碰到过,数据库没开binlog,General Query Log关闭的,出现误删除数据的场景,这就很困难了。