日志是把数据库的每一个变化都记载到一个专用的文件里，这种文件就叫做日志文件。二进制日志由配置文件的log-bin选项负责启用，Mysql服务器将在数据根目录创建两个新文件XXX-bin.001和xxx-bin.index，若配置选项没有给出文件名，Mysql将使用主机名称命名这两个文件，其中.index文件包含一份全体日志文件的清单。Mysql会把用户
转载
2023-10-02 19:38:40
175阅读
这个部分描述了事件被写入binlog或者delay log中的属性。所有的事件有相同的整体结构，也就是包含事件头和事件数据：+===================+
| event header |
+===================+
| event data |
+===================+具体的内容随着Mysql版本的升级而不同，这导致了bin
转载
2024-06-09 09:39:10
130阅读
## MySQL Binlog太大了
MySQL Binlog是MySQL数据库中的一种日志文件，用于记录数据库的所有操作，包括插入、更新、删除等操作。在某些情况下，Binlog可能会变得非常庞大，这样会对数据库的性能和存储空间造成一定的影响。本文将介绍如何解决MySQL Binlog太大的问题，并提供相应的代码示例。
### 1. 什么是MySQL Binlog
MySQL Binlog（
原创
2023-08-20 05:07:18
493阅读
# 如何处理 MySQL Binlog 文件过大的问题
在数据管理中，MySQL 的 binlog（binary log，二进制日志）用于记录对数据库所作的所有更改。然而，当 binlog 文件过大时，它可能会占用大量磁盘空间，甚至影响数据库性能。因此，学会管理 binlog 文件大小是非常重要的。本文将为你提供一套完整的处理步骤。
## 处理流程
下面是处理 MySQL binlog 文件
文章目录前言1. 修改 event 实现闪回1.1 binlog 结构1.2 闪回案例1.3 方法总结2. 解析文本闪回2.1 mysqlbinlog2.2 闪回案例2.3 方法总结3. 在线订阅闪回3.1 mysql-replication3.2 binlog2sql3.3 方法总结4. Binlog 分析方法4.1 分析场景4.2 辅助定位事务4.3 方法总结5. 平台化的解决方案5.1 数
转载
2024-08-23 17:51:53
84阅读
一、问题提出 之前写过一篇名为“快速安全删除MySQL大表”的博客，讲解如何在不影响线上数据库服务的前提下删除大表。实际上清理MySQL binlog也会遇到同样的问题。例如，我们每个binlog文件的大小是1G。最初的做法是，每天凌晨2:30执行下面的操作清理10天前binlog：mysql -uroot -p123456 -s /data/
转载
2024-02-20 10:43:05
97阅读
解决办法一：1.在mysql中修改查看binlog过期时间，这个值默认是0天，也就是说不自动清理，可以根据生产情况修改，目前环境是设置的60天。
show variables like ‘expire_logs_days’;set global expire_logs_days = 60; #设置binlog多少天过期这个只是零时的修改，数据库重启后会变成原始值0，需要永久生效的话就添加至配置文件
转载
2023-06-08 23:23:19
196阅读
有问题还是要看看源码。可以考虑使用 binlog 解析工具，比如 bin2sql 解决问题。可以看看慢日志里是否有记录。
原创
2024-03-06 16:27:06
47阅读
现象：网站访问越来越慢，最后无法访问了，经过检查发现磁盘满了分析过程及解决方案：通常出现这种问题都应该登录服务器检查磁盘、内存和进程使用的情况，通过top、df –h和free –m来检查，发现磁盘空间满了。再进一步通过du –sh对可以的目录进行检查，发现是mysql的binlog占用空间过大。清理binlog的方法如下： 1)设置日志保留时长expire_logs_days自动***
原创
2014-05-31 23:12:37
2441阅读
# 解决MySQL中`IN`子句性能问题
作为一名经验丰富的开发者，我经常被问到如何处理MySQL查询中的`IN`子句性能问题。`IN`子句在处理大量数据时可能会变得非常慢，尤其是当列表中的元素数量很大时。本文将指导你如何优化使用`IN`子句的查询，提高查询性能。
## 步骤流程
首先，我们需要了解整个优化流程，下面是一个简单的步骤表格：
| 步骤 | 描述 |
| --- | --- |
原创
2024-07-27 04:06:50
59阅读
MySQL主备复制原理MySQL master 将数据变更写入二进制日志( binary log, 其中记录叫做二进制日志事件binary log events，可以通过 show binlog events 进行查看)MySQL slave 将 master 的 binary log events 拷贝到它的中继日志(relay log)MySQL slave 重放 relay log 中事件，
转载
2023-07-06 14:18:35
126阅读
最近项目上装的mysql服务，分配的磁盘空间太小了，导致binlog两天时间就能打满，这里记录下处理方式mysql的binlog日志是一个很重要的日志，以事件形式记录了所有的DDL和DML(除了数据查询语句)语句，还包含执行的消耗的时间，在数据丢失的紧急情况下，我们可以利用binlog日志功能进行数据恢复。1、问题上面说了，默认情况下binlog日志默认在/var/spool/mail/root路
转载
2023-08-18 13:45:22
173阅读
需求：某业务 MySQL 迁移，但是迁移前需要做如下准备工作。统计各个业务表的 DML 操作情况。统计各个业务表的最后访问时间。条件：60 min 一个 1GB 的 Binlog。Binlog 保留一个月。如果你遇到这么个需求，你该如何着手分析呢？反正我面对这个需求的时候第一个想到的就是写脚本，让脚本自动分析。今天我们就来讲讲如何用 analysis_binlog 来快速进行 MySQL 的 Bi
转载
2023-08-23 15:02:19
88阅读
binlog 是 mysql 对操作日志的记录，本身为二进制文件，需要使用 mysqlbinlog 工具命令查看具体内容。包括三种模式：STATEMENT 记录每一条修改语句，无需记录每一条SQL 语句和每一行的数据变化，减少了日志量；但某些场景下会导致 master-slave 中的数据不一致，如 sleep 函数，last_insert_id(),user define function等。R
转载
2024-07-04 18:13:00
47阅读
MySQL的Redo log与binlogRedo logbinlog总结参考文献 Redo log 又称为重做日志。我们知道数据库中更新数据需要访问磁盘IO并精确找到所在的行进行操作，这一过程耗时较长，对于用户来说体验很差，MySQL采用Redo log的方式对此进行了优化，将更新操作先记录在Redo log中，然后等到合适的时机再将操作刷到磁盘中去。这种优化又称为WLA：Write-Ahe
转载
2023-07-04 18:19:10
111阅读
前言只要是接触过MySQL的程序员，那么或多或少都有听过redo log（重做日志）和binlog（归档日志）。今天就来分享一下这两个日志的用处和区别。简单来说，redo log是InnoDB特有的日志，如果使用的是其他存储引擎，就没有redo log，只有binlog。binlog是MySQL的Server层的日志，不管使用什么存储引擎，都会有binlog的存在。那么，为什么要有redo log
转载
2023-10-14 14:07:13
97阅读
<div id="article_content" class="article_content clearfix">
<div class="blog-column-pay">
<a data-report-click="{"mod":
转载
2023-07-20 14:39:33
98阅读
redo log简介**redo log（重做日志）**是InnoDB存储引擎独有的，它让MySQL拥有了崩溃恢复能力。 比如 MySQL 实例挂了或宕机了，重启时，InnoDB存储引擎会使用redo log恢复数据，保证数据的持久性与完整性。注意：redo log是为了恢复buffer pool的数据，防止未刷盘的脏页数据的丢失。写入时机mysql更新表数据的时候，也是如此，发现 Buffer
转载
2023-09-10 22:05:35
91阅读
Mysql Binlog三种格式详细介绍一．MySQL Binlog格式介绍mysql binlog日志有三种格式，分别为 Statement、 MiXED、ROW查看binlog的格式的脚本：SHOW GLOBAL VARIABLES LIKE 'binlog_format'二、binlog 的不同模式有什么区别呢？1.Statement：
转载
2023-07-04 13:43:45
88阅读
mysql的binlog日志是用来记录mysql内部增删改查等对mysql数据库有更新的内容的记录(对数据库的改动)，对数据库的查询select或show等不会被binlog日志记录。主要用于数据库的主从复制以及增量恢复。mysqlbinlog是mysql自带的binlog解析工具，可以将mysql的binlog日志转换成Mysql语句，默认情况下binlog日志是二进制文件，无法直接查看。mys
转载
2023-08-18 13:57:16
115阅读
