叙述监控线上实例时，曾出现可用内存不足，性能发生抖动的情况。研究后发现是日志文件的page cache占用了大量的内存（200G+），导致系统可立即分配的内存不足，影响了系统性能。查看linux内核文档发现，操作系统在内存的使用未超过上限时，不会主动释放page cache，以求达到最高的文件访问效率；当遇到较大的内存需求，操作系统会当场淘汰一些page cache以满足需求。由于page cac
转载
2024-10-22 14:52:43
35阅读
常见类型在InnoDB存储引擎中，常见的页类型包括以下几种数据页（Data Page）：存储表中的数据记录。索引页（Index Page）：存储表的索引信息。undo页（Undo Page）：存储事务回滚信息。redo页（Redo Page）：存储事务提交信息。描述页（FSP Page）：存储表空间的元数据信息。描述页（Inode Page）：存储InnoDB文件系统的元数据信息。BLOB页（BL
原创
2023-09-08 15:03:18
333阅读
# 如何实现 MySQL 最小的 Page 页
在开发中，我们常常需要理解数据库的底层机制，其中 MySQL 的页面管理是一个重要概念。本文将带你了解如何创建一个最小的 Page 页，帮助你更加深入地理解 MySQL 的存储引擎。我们会通过一系列步骤来阐释这个过程，并提供详细的示例代码以及注释。为了便于理解，我们使用表格展示流程，并用 Mermaid 语法绘制类图。
## 流程概述
下面是实
原创
2024-09-15 05:10:05
37阅读
数据页基本结构页是 InnoDB 管理存储空间的最小单位。一个页的大小一般是 16 KB。InnoDB 有许多种页用于不同的作用。其中数据页则是用于存储数据。数据页存储的内容为:页其中 Infimum + supremum 以及 User Records 为页中存储数据的部分。其中 Infimum 表示页中的最小记录，而 supremum 表示页中的最大记录。这两个记录不存储实际的值，而仅仅表示开
转载
2023-10-16 14:55:54
67阅读
MySQL作为一个存储系统，具有缓冲池(buffer pool)机制，以避免每次查询数据都进行磁盘IO。As a storage system, MySQL has a buffer pool mechanism to avoid disk IO for every query data缓存池的结构Buffer Pool 是一片连续的内存空间，innodb 存储引擎是通过页的方式对这块内存进行管理
转载
2024-02-22 11:35:32
103阅读
数据页结构数据页代表这块16KB大小的存储空间可以被划分为过个部分，不同部分有不同功能：记录在页中的存储我们自己存储的记录会按照我们制定的航格式存储到User Records部分。但是在一开始生成页的时候，并没有这个部分，每当插入一条记录，都会从Free Space部分去申请一个记录大小的空间划分到User Records部分，当Free Space部分的空间全部被替代之后，也就意味着这个页使用完
转载
2023-09-21 14:52:20
131阅读
文章目录数据页结构示意图组成部分File Header（38字节） 文件头部Page Header（56字节） 页面头部Infimum+supremum （26字节） 最小记录和最大记录User Records 用户记录Free Space 空闲空间Page Directory 页目录分组（槽）的依据查找槽的位置File Tailer(8字节) 文件尾部总结 今天我们来说一下页，它是 InnoDB
转载
2023-10-06 11:53:06
182阅读
墨墨导读：Page是MySQL Innodb存储的最基本结构，也是Innodb磁盘管理的最小单位，了解page的一些特性，可以更容易理解MySQL。innodb_page_size作为innodb和OS交互单位。文件系统对文件的buffer IO，也是page为单位进行处理的。Linux的默认page的大小4096字节，当要将数据写入到文件的时候，会先在内存里，然后将对应的page cache，整
转载
2024-04-11 11:47:06
126阅读
下面我们就一起看下，究竟什么是MySQL的数据页、数据区等概念。二、数据页长啥样？数据页长下面这样：image.png三、什么是数据区？在MySQL的设定中，同一个表空间内的一组连续的数据页为一个extent(区)，默认区的大小为1MB，页的大小为16KB。16*64=1024，也就是说一个区里面会有64个连续的数据页。连续的256个数据区为一组数据区。于是我们可以画出这张图：image从直观上看
转载
2023-08-19 19:33:03
299阅读
数据库存储和读取在整个数据库体系结构中，我们可以使用不同的存储引擎来存储数据，而绝大多数存储引擎都以二进制的形式存储数据。在 InnoDB 存储引擎中，所有的数据都被逻辑地存放在表空间中，表空间（tablespace）是存储引擎中最高的存储逻辑单位，在表空间的下面又包括段（segment）、区（extent）、页（page）：同一个数据库实例的所有表空间都有相同的页大小；默认情况下，表空间中的页大
转载
2023-10-24 00:01:44
106阅读
InnoDB基本概念InnoDB存储引擎中又页的概念，页是磁盘管理的最小单位。InnoDB存储引擎中默认每个页的大小为16KB，可通过参数innodb_page_size 将页大小设置为4KB, 8KB, 16KB。在MySQL中可通过如下命令查看页的大小：命令：show variables like 'innodb_page_size'
结果：其中，16384 Byte= 16*1024 KBy
转载
2023-12-25 14:55:22
154阅读
MySQL的页清理机制是用于回收InnoDB存储引擎中的脏页（dirty page）的一种机制。当InnoDB的内存池中的缓存页不够用时，会将一部分脏页写入磁盘，以腾出内存空间。但是，如果所有的脏页都需要写入磁盘，那么这个过程就会成为瓶颈。为了解决这个问题，MySQL引入了页清理机制。这个机制的基本思想是在后台线程中不断运行一个“页清理器”（page cleaner），该清理器会检查内存池中的页的
转载
2023-08-11 21:48:16
169阅读
小结： 1、 页：磁盘和内存间传输数据的最小单位； MySQL: What is a page? https://stackoverflow.com/questions/4401910/mysql-what-is-a-page https://baike.baidu.com/item/分页 分页（英
转载
2019-02-13 15:25:00
180阅读
2评论
逻辑地址与物理地址的转化 页表是由页表项（PTE）组成的数组。512个PTE构成一个页表页（Page-table page）。 PTE中包含了物理页码（PPN physical page number）以及一些标志，来控制物理空间块的读写访问权限。 物理地址与虚拟地址的映射为三层树形结构，每一层存储 ...
转载
2021-10-29 22:09:00
1002阅读
2评论
页错误(Page Fault)
原创
2021-08-02 13:38:31
423阅读
在上期的月报中，我们已经详细介绍了Oracle MySQL以及社区分支最新的对InnoDB page flush的优化。在最近release的5.7.6版本中又有了进一步的改进。主要包括以下几点修改修改一、更精确的loop时间Page cleaner每做srv_flushing_avg_loops次flush后，会去计算刷脏和Redo LSN增长的速度。由于每次Page cleaner的工作量是自
转载
2023-12-08 15:19:57
35阅读
目录1. 改善FLU刷脏1.1 增加并发（5.7.4）：1.2 改善链表遍历方式：1.3 平衡刷脏权重（5.7.6）1.4 用户线程在检查Redo 空间时不参与刷脏（5.7.6）1.5 为page cleaner线程设置更高的优先级（5.7.6）2. 改善LRU刷脏2.1 脏页 to FreeList3. LRU和FLU刷脏分离（Percona）4. 参考链接1. 改
转载
2023-09-22 19:25:40
60阅读
文章目录MySQL InnoDB 数据页1. InnoDB 数据页的大小2. InnoDB 数据页结构3. Page Directory 和槽3. 页的数量假设 B+ 树的深度为 2假设 B+ 树的深度为 3行数据有多长 MySQL InnoDB 数据页1. InnoDB 数据页的大小在 MySQL（的 InnoDB 引擎）层面，操作的最小单位是"页"，一个页的大小是 16k 。在 MySQL
转载
2023-07-27 20:50:10
215阅读
# MySQL 刷脏页 Page Clean 条件解析
在MySQL数据库的高效运行中，内存管理和数据存储策略至关重要。尤其是在使用InnoDB引擎时，刷脏页（Dirty Page）和页面清理（Page Clean）过程是维护数据库性能的关键。本文将探讨MySQL中刷脏页的条件和相关机制，帮助大家更好地理解这一过程。
## 基本概念
在数据库中，“脏页”是指那些已经在内存中被修改但还未写入到
作者：cfanbo来源：Segmentfault 思否社区在介绍InnoDB中的页的时候，很有必要先让大家了
转载
2021-08-11 15:59:50
113阅读
