# MySQL 脏页太多：问题与解决方案
在使用 MySQL 数据库时，很多开发者可能会遇到“脏页”（Dirty Page）的问题。脏页是指在内存中修改过但尚未写回磁盘的数据页。在高并发的数据库操作下，脏页过多可能导致性能下降，甚至引发数据一致性的问题。本篇文章将探讨脏页的概念及其影响，并提供解决方案。
## 脏页的概念
在 MySQL 中，数据页是数据库存储的重要单位。脏页是内存中已经修改
原创
2024-09-06 06:33:30
59阅读
MySQL 在遇到高并发读写的情况下会读到脏数据，如何理解？举一个简单的栗子： 用户A、用户B、用户C 抢购一件商品，每人限购一件，商品库存为10，假如 A、B、C 并发情况下则同时得到 库存为 10，同时对库存10进行操作，看下相关示意图： 用户A 操作: 库存 10 -1 =9，对应的 SQL: update table set goods_number=goods_number-1; 用
转载
2023-09-03 17:01:23
98阅读
只管计算公式比较明晰，但有些factor的定值依然让人很困惑，兴许是民间测试的比较现实的配置。不过最好还是设置成可配置的，由有阅历的用户根据自己详细的负载情况来停止定制。轮询每个Buffer pool 实例：修正四、为page cleaner线程设置更高的优先级理想上, Percona Server早在5.6版本里已经利用相反的战略了。在新的逻辑里，在检测到当前写入的Redo 能够形成笼罩上次的c
## MySQL 脏页太多的情况及解决方案
在 MySQL 数据库中，脏页是指内存中的数据页与磁盘上的数据页不一致的情况。当脏页太多时，可能会导致数据库性能下降，甚至造成数据损坏。本文将介绍导致脏页太多的几种情况，并提供相应的解决方案。
### 1. 事务过长
事务是数据库中的一个基础概念，它代表了一系列的数据库操作，这些操作要么全部成功，要么全部失败。如果一个事务过长，执行时间较长，那么在
原创
2023-07-28 13:55:49
254阅读
0.前言Linux 内核Page Cache 和Buffer Cache 关系及演化历史 一文中讲过Linux 2.4之后将Page Cache和Buffer Cache 进行了融合，在buffer_head 中添加了b_page，很容易就能找到缓存的Page Cache，而buffer_head 的存在就是能够快速确定页中的一个块在磁盘中的地址。Linux内核由于存在page cac
转载
2023-12-27 17:07:51
50阅读
#mysql 刷脏页 ··· mysql> select @@innodb_flush_neighbors; @@innodb_flus
转载
2021-08-10 11:28:00
965阅读
2评论
InnoDB 刷脏页的控制策略1.InnoDB 刷脏页的控制策略innodb_io_capacity 它会告诉 InnoDB 你的磁盘能力. 这个值建议你设置成磁盘的 IOPS。磁盘的 IOPS 可以通过 fio 这个工具来测试，下面的语句是我用来测试磁盘随机读写的命令：fio -filename=$filename -direct=1 -iodepth 1 -thread -rw=randrw
转载
2024-01-10 19:59:39
41阅读
当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入到磁盘后，内存和磁盘上的数据页的内容就一致了，称为“干净页”。平时执行很快的更新操作，其实就是在写内存和日志，而 MySQL 偶尔“抖”一下的那个瞬间，可能就是在刷脏页(flush)。那么，什么情况会引发数据库的 flush 过程呢？第一种场景是InnoDB 的 redo log 写满了，这时候系统会停止所有更新操作
转载
2023-11-04 17:01:23
90阅读
一、抛砖引玉 一条 SQL 语句，正常执行的时候特别快，但是有时也不知道怎么回事，它就会变得特别慢，并且这样的场景很难复现，它不只随机，而且持续时间还很短。?：1.为什么抖呢？因为MySQL哪个时候可能在刷脏页（flush）。PS：这里就要提到一个概念了：脏页 && 干净页。二、正文开始?：2.什么是脏页？干净页？ 当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页
转载
2024-02-02 23:14:27
53阅读
mysql启动后buffer pool会初始化。buffer pool也会初始化好n多个空白的缓存页，以及它们的描述数据会被组织成lru链表以及freelist 双向链表。这时你从磁盘中读取一个数据页，会先从free list中找出一个空闲缓存页的描述信息，然后将你读出的数据页中加载进缓存页中。同时将缓存页的描述信息从free list中剔除，此外该描述信息块还会被维护进lru链表中。数据页被加载
转载
2024-07-23 09:25:12
32阅读
mysql面试的八股文，持续更新连接器的最大连接数以及调优mysql服务器最大支持max_connect 为 16384根据需求来看，一般2核4G机器填写1000，16核64G填写5000。刷脏页 参数innodb_io_capacity 表示磁盘的io能力，控制了刷脏页的速度innodb_max_dirty_pages_pct 脏页比例阈值，达到这个值就开始刷脏页脏页比例计算 Innodb_bu
转载
2023-11-14 09:36:31
73阅读
innodb_io_capacity描述：此参数用于控制InnoDB引擎刷脏页的速度，数据变更只记录到内存还未写入到磁盘的数据页称为脏页；把内存页数据写入到磁盘的过程，称为刷脏页（flush）。若刷脏页速度太快超过磁盘的IO写入能力，或者磁盘IO能力很高但刷脏页速度设置得太低，都会影响数据库的性能。默认值：200建议值：设置成磁盘的 IOPS，磁盘的 IOPS 可以通过 fio 这个工具来测试，命
转载
2024-01-17 10:18:57
42阅读
一. InnoDB 刷脏页流程InnoDB 在处理更新语句的时候，只做了写日志这一个磁盘操作。这个日志叫作 redo log（重做日志），在 更新内存 并 写完 redo log 后，就返回给客户端，本次更新成功。但实际上，对应的数据没有被更新到磁盘，系统总要找时间把数据写入磁盘，这个写入过程的术语就是 flush。当内存数据页跟磁盘数据页内容不一致的时候，我们称这个内存页为“脏页”。内存数据写入
转载
2023-08-10 11:24:14
267阅读
为何会有这种情况？这种情况的发生，有可能是MySQL把内存中脏页的数据写入到磁盘中引起的。那么何为脏页？脏页的意思就是内存中的数据页跟磁盘中的数据页内容不一致，这内存中的页就被称为脏页。同理可得，如果内存中的数据页和磁盘中的数据页内容一致，就称为干净页。抖的原因这个可能就发生在把内存中脏页的数据更新到磁盘中数据页数据的过程。这个过程中涉及到redo log这个日志，关于这个redo log的相关文
转载
2024-01-17 10:22:53
27阅读
1、脏写两个事务没提交的状况下，都修改统一条数据，结果一个事务回滚了，把另外一个事务修改的值也撤销了，所谓脏写就是两个事务没提交状态下修改同一个值。示例：事务A和事务B同事在更新一条数据，事务A先把他更新为A值，事务B紧接着就把他更新为B值，如下图所示： 事务A先更新数据值为A，事务B再更新数据值为B，此时事务A突然回滚，回滚为A之前的数据因为事务A回滚数据导致事务B的值也变回了A之前的
转载
2024-01-10 17:31:21
112阅读
我们知道InnoDB采用Write Ahead Log策略来防止宕机数据丢失，即事务提交时，先写重做日志，再修改内存数据页，这样就产生了脏页。既然有重做日志保证数据持久性，查询时也可以直接从缓冲池页中取数据，那为什么还要刷新脏页到磁盘呢？如果重做日志可以无限增大，同时缓冲池足够大，能够缓存所有数据，那么是不需要将缓冲池中的脏页刷新到磁盘。但是，通常会有以下几个问题：服务器内存有限，缓冲池不够用，无
转载
2024-06-06 16:34:37
69阅读
脏页的定义内存中的数据页跟磁盘中的数据页不一致的时候，这些数据页就是脏页需要刷新脏页的场景InnoDB的redo log写满了系统内存不足系统空闲时（不影响性能）MySQL正常关闭过程（不影响性能）刷新脏页的场景分析场景1 - InnoDB的redo log写满了这种情况要尽量避免，出现这种情况的时候，整个系统就不能再接受更新了，所有更新都将被阻塞场景2 - 系统内存不足内存不足是指InnoDB中
转载
2023-11-27 21:45:43
6阅读
场景: 一条SQL语句，正常执行的时候特别快，但是有时不知道怎么回事，就会变得特别慢，并且这样的场景很难复现，不只是随机，而且持续时间还很短。原因: 只要了解WAL机制，就知道InnoDB在处理更新语句的时候，只做了写日志这个磁盘操作，这个日志叫作redo log(重做日志)，在更新内存写完redo log后，就返回更新成功。 所以总需要时间去将内存中的数据写入到磁盘中，这个过程的术语就叫作flu
转载
2023-12-15 11:15:58
0阅读
脏页的定义是内存中和磁盘中的不一致页。那么脏页是如何产生的？在之前的介绍中，我们明白了innodb引擎是如何执行更新操作
原创
2022-11-11 12:10:39
175阅读
的性能，其实两种情况的原因是一样的，刷脏页会占用
原创
2022-02-13 15:26:22
751阅读
