MySQL是一个广泛使用的关系型数据库，但在实际应用中我们常常会遇到一些问题，其中之一就是“mysql脏页造成mysql挂掉”。这个问题通常是因为缓存中的数据未能及时写入磁盘，导致系统崩溃或不稳定。本篇文章将详细记录如何解决这一问题的过程，包括环境准备、分步指南、配置详解、验证测试、优化技巧和排错指南。
## 环境准备
在开始之前，我们需要确保所有的前置依赖已正确安装。这是部署MySQL数据库
#mysql 刷脏页 ··· mysql> select @@innodb_flush_neighbors; @@innodb_flus
转载
2021-08-10 11:28:00
965阅读
2评论
InnoDB 刷脏页的控制策略1.InnoDB 刷脏页的控制策略innodb_io_capacity 它会告诉 InnoDB 你的磁盘能力. 这个值建议你设置成磁盘的 IOPS。磁盘的 IOPS 可以通过 fio 这个工具来测试，下面的语句是我用来测试磁盘随机读写的命令：fio -filename=$filename -direct=1 -iodepth 1 -thread -rw=randrw
转载
2024-01-10 19:59:39
41阅读
当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入到磁盘后，内存和磁盘上的数据页的内容就一致了，称为“干净页”。平时执行很快的更新操作，其实就是在写内存和日志，而 MySQL 偶尔“抖”一下的那个瞬间，可能就是在刷脏页(flush)。那么，什么情况会引发数据库的 flush 过程呢？第一种场景是InnoDB 的 redo log 写满了，这时候系统会停止所有更新操作
转载
2023-11-04 17:01:23
92阅读
一、抛砖引玉 一条 SQL 语句，正常执行的时候特别快，但是有时也不知道怎么回事，它就会变得特别慢，并且这样的场景很难复现，它不只随机，而且持续时间还很短。?：1.为什么抖呢？因为MySQL哪个时候可能在刷脏页（flush）。PS：这里就要提到一个概念了：脏页 && 干净页。二、正文开始?：2.什么是脏页？干净页？ 当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页
转载
2024-02-02 23:14:27
53阅读
0.前言Linux 内核Page Cache 和Buffer Cache 关系及演化历史 一文中讲过Linux 2.4之后将Page Cache和Buffer Cache 进行了融合，在buffer_head 中添加了b_page，很容易就能找到缓存的Page Cache，而buffer_head 的存在就是能够快速确定页中的一个块在磁盘中的地址。Linux内核由于存在page cac
转载
2023-12-27 17:07:51
53阅读
mysql面试的八股文，持续更新连接器的最大连接数以及调优mysql服务器最大支持max_connect 为 16384根据需求来看，一般2核4G机器填写1000，16核64G填写5000。刷脏页 参数innodb_io_capacity 表示磁盘的io能力，控制了刷脏页的速度innodb_max_dirty_pages_pct 脏页比例阈值，达到这个值就开始刷脏页脏页比例计算 Innodb_bu
转载
2023-11-14 09:36:31
80阅读
mysql启动后buffer pool会初始化。buffer pool也会初始化好n多个空白的缓存页，以及它们的描述数据会被组织成lru链表以及freelist 双向链表。这时你从磁盘中读取一个数据页，会先从free list中找出一个空闲缓存页的描述信息，然后将你读出的数据页中加载进缓存页中。同时将缓存页的描述信息从free list中剔除，此外该描述信息块还会被维护进lru链表中。数据页被加载
转载
2024-07-23 09:25:12
32阅读
innodb_io_capacity描述：此参数用于控制InnoDB引擎刷脏页的速度，数据变更只记录到内存还未写入到磁盘的数据页称为脏页；把内存页数据写入到磁盘的过程，称为刷脏页（flush）。若刷脏页速度太快超过磁盘的IO写入能力，或者磁盘IO能力很高但刷脏页速度设置得太低，都会影响数据库的性能。默认值：200建议值：设置成磁盘的 IOPS，磁盘的 IOPS 可以通过 fio 这个工具来测试，命
转载
2024-01-17 10:18:57
42阅读
一. InnoDB 刷脏页流程InnoDB 在处理更新语句的时候，只做了写日志这一个磁盘操作。这个日志叫作 redo log（重做日志），在 更新内存 并 写完 redo log 后，就返回给客户端，本次更新成功。但实际上，对应的数据没有被更新到磁盘，系统总要找时间把数据写入磁盘，这个写入过程的术语就是 flush。当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入
转载
2023-08-10 11:24:14
277阅读
为何会有这种情况？这种情况的发生，有可能是MySQL把内存中脏页的数据写入到磁盘中引起的。那么何为脏页？脏页的意思就是内存中的数据页跟磁盘中的数据页内容不一致，这内存中的页就被称为脏页。同理可得，如果内存中的数据页和磁盘中的数据页内容一致，就称为干净页。抖的原因这个可能就发生在把内存中脏页的数据更新到磁盘中数据页数据的过程。这个过程中涉及到redo log这个日志，关于这个redo log的相关文
转载
2024-01-17 10:22:53
27阅读
1、脏写两个事务没提交的状况下，都修改统一条数据，结果一个事务回滚了，把另外一个事务修改的值也撤销了，所谓脏写就是两个事务没提交状态下修改同一个值。示例：事务A和事务B同事在更新一条数据，事务A先把他更新为A值，事务B紧接着就把他更新为B值，如下图所示： 事务A先更新数据值为A，事务B再更新数据值为B，此时事务A突然回滚，回滚为A之前的数据因为事务A回滚数据导致事务B的值也变回了A之前的
转载
2024-01-10 17:31:21
112阅读
我们知道InnoDB采用Write Ahead Log策略来防止宕机数据丢失，即事务提交时，先写重做日志，再修改内存数据页，这样就产生了脏页。既然有重做日志保证数据持久性，查询时也可以直接从缓冲池页中取数据，那为什么还要刷新脏页到磁盘呢？如果重做日志可以无限增大，同时缓冲池足够大，能够缓存所有数据，那么是不需要将缓冲池中的脏页刷新到磁盘。但是，通常会有以下几个问题：服务器内存有限，缓冲池不够用，无
转载
2024-06-06 16:34:37
69阅读
脏页的定义内存中的数据页跟磁盘中的数据页不一致的时候，这些数据页就是脏页需要刷新脏页的场景InnoDB的redo log写满了系统内存不足系统空闲时（不影响性能）MySQL正常关闭过程（不影响性能）刷新脏页的场景分析场景1 - InnoDB的redo log写满了这种情况要尽量避免，出现这种情况的时候，整个系统就不能再接受更新了，所有更新都将被阻塞场景2 - 系统内存不足内存不足是指InnoDB中
转载
2023-11-27 21:45:43
6阅读
场景: 一条SQL语句，正常执行的时候特别快，但是有时不知道怎么回事，就会变得特别慢，并且这样的场景很难复现，不只是随机，而且持续时间还很短。原因: 只要了解WAL机制，就知道InnoDB在处理更新语句的时候，只做了写日志这个磁盘操作，这个日志叫作redo log(重做日志)，在更新内存写完redo log后，就返回更新成功。 所以总需要时间去将内存中的数据写入到磁盘中，这个过程的术语就叫作flu
转载
2023-12-15 11:15:58
0阅读
概念：脏页：当内存数据页跟磁盘数据页不一致时，称为内存页的“脏页”。干净页：内存数据写入磁盘后，内存和磁盘上的数据页内容就一致了，称为“干净页”。在写内存和日志，而MySQL偶尔抖一下的瞬间，可能就是在刷脏页(flush)。什么情况会引发数据库的 flush 过程呢？1. ，对应的就是 InnoDB 的 redo log 写满了。这时候系统会停止所有更新操作，把 checkpoint 往
转载
2023-10-11 15:41:25
64阅读
“抖”：sql执行变慢了，随机出现，持续时间短。刷脏页的原因： innodb在更新数据的时候，更新内存，写redo log，（并没有将内存数据页同步到磁盘上）。 这里引出两个概念：脏页 内存页与磁盘页数据不一致的内存页干净页 内存页与磁盘页数据一致的内存页 flush脏页就是将内存页的数据更新到磁盘刷脏页的触发时机：redo log 写满了。flush脏页。内存不足，淘汰数据页，淘汰的数据页是脏页
转载
2024-03-02 11:26:59
41阅读
你的 SQL 语句为什么变“慢”了平时执行很快的更新操作，其实就是在写内存和日志，而 MySQL 偶尔“抖”一下的那个瞬间，可能就是在刷脏页(flush)。当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入到磁盘后，内存和磁盘上的数据页的内容就一致了，称为“干净页”什么情况会引发数据库的 flush 过程呢？InnoDB 的 redo log 写满了这时候系统会停止
转载
2024-04-28 20:58:14
74阅读
脏页的定义是内存中和磁盘中的不一致页。那么脏页是如何产生的？在之前的介绍中，我们明白了innodb引擎是如何执行更新操作
原创
2022-11-11 12:10:39
175阅读
的性能，其实两种情况的原因是一样的，刷脏页会占用
原创
2022-02-13 15:26:22
751阅读
