hcymysql的博客_MySQL优化(1)

MySQL 5.7：如何有效规避 MDL 元数据锁阻塞？

在 MySQL 5.7 中，元数据锁（MDL, Metadata Lock）机制用于确保数据一致性，但如果处理不当，可能会导致长时间阻塞，影响数据库的并发性能。MDL 锁的影响任何读取或写入操作都会获取 MDL 锁，以防止表结构在操作过程中发生变更。例如，在 SELECT 查询执行时，不能对表进行 ALTER 操作，否则会出现等待现象。假设以下事务按顺序执行：1.事务 A 执行：SELE

表结构

读锁

数据库

原创 8月前 156 阅读

utf8mb4_bin 排序规则和 utf8mb4_general_ci 的区别

在 MySQL 中，字符集和排序规则决定了如何对字符进行比较和排序。utf8mb4_bin 和 utf8mb4_general_ci 是两种常用的排序规则，它们的主要区别在于是否区分大小写以及是否考虑字符的语言特性。下面通过详细案例来帮助你理解这两者的差异。1. utf8mb4_bin 排序规则utf8mb4_bin 是一种二进制排序规则，表示比较字符时是基于字符的二进制值进行逐位比较的，完全区分

大小写

排序规则

ci

原创 9月前 854 阅读

MariaDB 扩展了 Limit 语法

1.传统LimitSELECT * FROM staffs WHERE age > 35 LIMIT 10;- 会持续扫描表直到找到10条符合条件的记录- 如果表有1000万行，可能需要扫描到最后一行- 消耗资源大，执行时间长2.使用 LIMIT ... ROWS EXAMINED 的查询SELECT * FROM staffs WHERE age > 35 LIMIT 10 ROWS

执行时间

数据库

原创 9月前 94 阅读

MySQL 8.0索引合并 - 优化器如何处理OR条件查询？

在MySQL 8.0中，优化器对OR条件查询的处理逻辑有了显著的改进，特别是在索引合并方面。背景在MySQL 5.7中，对于以下查询：select * from t1 where cid=3 or info='ccc';优化器无法有效利用索引，因为OR条件查询通常会导致全表扫描，特别是当两个条件分别使用不同的索引时。MySQL 8.0中的改进在MySQL 8.0中，优化器引入了索引合并（Index

ci

MySQL

主键

原创精选 9月前 578 阅读

MySQL 8.0 体验 UUID v7

UUID v7 和 UUID v1 之间存在几个显著的区别，主要体现在生成方式、结构、安全性和适用场景等方面。主要区别UUID v1：由时间戳、MAC 地址和时钟序列生成。它依赖于设备的硬件地址（MAC 地址），因此在同一设备上生成的 UUID 可能会泄露设备信息。UUID v7：结合了 Unix 时间戳和随机数生成。UUID v7 不使用 MAC 地址，而是完全依赖随机数，从而提高了隐私和安全性

mysql

时间戳

随机数

原创 10月前 625 阅读

MySQL 8.0 为 Java 开发者提供了许多强大的新特性

以下是一些关键点：1.通用表表达式 (CTE): CTE 允许您定义命名的临时结果集,这些结果集可以在后续的SELECT、INSERT、UPDATE、DELETE或CREATE VIEW语句中被引用。这对于编写复杂查询特别有用。WITH RECURSIVE employee_hierarchy AS ( SELECT id, name, manager_id, 1 AS level FRO

MySQL

主键

JSON

原创精选 2024-09-27 13:48:57 478 阅读

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。用户级锁不直接与InnoDB的内部行或表锁定机制交互。用户级锁使用 GET_LOCK()、RELEASE_LOCK() 函数进行管理。用户级锁提供了更细粒度的控制，让你能在应用层实施自定义加锁策略。主要函数包括：GET_LOCK(name, timeout)：获取指定的锁。如果另一个会话持

MySQL

开发人员

互斥

原创 2024-09-18 14:52:45 155 阅读

利用MySQL FIELD函数，按照你的意愿去做排序。

ORDER BY 与 FIELD结合：通过将FIELD函数放在ORDER BY子句中，我们可以自定义排序顺序，而不是按照默认的升序或降序排序。下面我将创建一个名为students的表，插入10条记录，并使用ORDER BY FIELD函数举例说明其用法。演示1.创建表CREATE TABLE students ( id INT PRIMARY KEY, name VARCHAR(5

Grace

升序

字段

原创 2024-09-14 14:24:52 217 阅读

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 8.0 新增 JSON_TABLE 函数的使用通过 JSON_TABLE 函数，可以将 JSON 文档中的数据提取出来，并以表格的形式返回客户端。基本用法：JSON_TABLE( json_doc, path COLUMNS (column_list) ) [AS] alias其中：json_doc 是 JSON 文档（可以是一个 JSON 列或 JSON 字符串）pa

JSON

ci

mysql

原创 2024-09-03 10:19:33 905 阅读

MySQL 允许你在 JSON 数据上创建索引

MySQL 允许你在 JSON 数据上创建索引测试用例CREATE TABLE `student` ( `id` int NOT NULL AUTO_INCREMENT, `name` varchar(255) DEFAULT NULL, `age` int DEFAULT NULL, `courses` json DEFAULT NULL, `address` json DE

JSON

mysql

数据

原创精选 2024-09-03 09:38:18 411 阅读

Readyset 是 MySQL 轻量级缓存解决方案

简介Readyset 是一种轻量级缓存解决方案，利用内存来存储缓存数据，实现复杂的 SQL 闪电般快速查询。 Readyset 介于应用程序和数据库之间，是一个Cache层。相当于Redis/Memcached的作用，但它不需要更改你的一行代码。架构Java/PHP应用程序 -> Readyset -> MySQL数据库Readyset 的工作流程如下:对于读操作:您直接向

缓存

SQL

数据库

原创精选 2024-08-19 15:07:02 541 阅读 1收藏 1评论

利用InnoDB Memcached插件，大幅提升MySQL查询性能

利用InnoDB Memcached插件，大幅提升MySQL查询性能MySQL自带有强大的Memcached插件，能够将InnoDB表中的数据直接映射到内存中，实现高性能的键值对存储。这意味着，我们可以像操作传统Memcached一样，通过简单的key来快速获取数据，而无需经过复杂的SQL解析过程。关键优势：性能大幅提升: 直接访问内存中的数据，显著加快查询速度。持久化支持: 数据不仅缓存在内存中

mysql

数据

memcached

原创精选 2024-08-07 09:38:52 418 阅读 1收藏

Percona版sysbench-tpcc - 模拟真实电商业务场景压力测试工具

Percona版sysbench-tpcc - 模拟真实电商业务场景压力测试工具可以为MySQL/Percona/MariaDB，以及MySQL协议的国产数据库选型，做性能参考。# 安装（依赖sysbench）shell> yum install sysbench -y shell> wget https://github.com/Percona-Lab/sysbench-tpcc/a

mysql

MySQL

lua

原创 2024-02-18 18:13:36 407 阅读

一招让order by id索引失效！

测试用例CREATE TABLE `sbtest1` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `k` int(10) unsigned NOT NULL DEFAULT '0', `c` char(120) NOT NULL DEFAULT '', `pad` char(60) NOT NULL DEFAULT '',

主键

测试用例

MySQL

原创 2023-12-25 14:09:15 941 阅读

rank无法适配MySQL 8.0，准备迁移请留步！

rank在MySQL 8.0里是作为保留关键字，固业务要更改SQL才能适配！！！具体请看下面的截图：这是MySQL 5.7，该SQL顺利执行：这是MySQL 8.0，直接报错！

MySQL

SQL

原创 2023-12-16 21:51:11 768 阅读 1评论

一个诡异的SQL返回结果，可作为面试题

复现：CREATE TABLE `t1` ( `user_id` int DEFAULT NULL, `name` varchar(10) DEFAULT NULL, `address` varchar(10) DEFAULT NULL, KEY `idx_userid` (`user_id`) ) ENGINE=InnoDBmysql> select * from t1;

mysql

数据

MySQL

原创 2023-12-10 01:03:16 326 阅读

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL集群从5.7升级至8.0的故事官方文献：https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/全文译：15 年前，GitHub 从一个带有单一 MySQL 数据库的 Ruby on Rails 应用程序起步。从那时起，GitHub 不断发展 MyS

MySQL

回滚

数据

原创 2023-12-09 21:30:09 161 阅读

PERCONA 8.0 新增kill_idle_transaction参数

PERCONA 8.0 新增kill_idle_transaction参数，其作用是：自动KILL掉未提交的空闲事务。注：MYSQL 8.0.35并不支持。参加官方文档：https://docs.percona.com/percona-server/8.0/kill-idle-trx.html场景：update t1 set cid=200 where id = 20;这条SQL长时间未提交，那么

html

高并发

SQL

原创 2023-12-01 16:55:03 254 阅读

实现MySQL AES_ENCRYPT函数带盐 - 对字段值做加密处理

在MySQL中，AES_ENCRYPT函数本身不包含盐的功能。盐（salt）是一个随机生成的值，用于增加加密的复杂性和安全性。在使用盐时，需要确保每次加密都使用不同的盐值，并将盐值与加密后的数据一起存储。解密时，需要将盐值与加密后的数据一起使用，以正确还原原始数据。使用带盐的AES_ENCRYPT函数，加密具体步骤如下：生成一个随机的盐值。盐值应该足够长、足够复杂，以增加破解的难度。将盐值和密钥连

数据

字符串

加密结果

原创 2023-09-26 13:50:18 633 阅读

【sql_helper】自动判断条件字段是否增加索引

输入SQL自动判断条件字段是否增加索引https://github.com/hcymysql/sql_helper使用：shell> chmod 755 sql_helper shell> ./sql_helper -f test.yaml -q 'select * from sbtest1 limit 1;'注：test.yaml为MySQL配置文件

sql

MySQL

mysql

原创 2023-08-03 17:31:46 307 阅读 1点赞

【王炸功能】MariaDB 10.8 Alter修改表结构实现从库无延迟并行复制

通常，ALTER TABLE首先在主库上执行完毕后，才被复制并开始在从库上执行。有了这个特性，当ALTER TABLE在主库上开始执行时，它会立刻被复制并开始在从库上执行。这样可以完全消除从库的复制滞后，即可实现从库无延迟并行复制。使用：MariaDB [test]> set global binlog_alte

mysql

原创 2022-06-01 15:02:39 752 阅读

InnoDB 页面压缩Page Compression可降低磁盘开销，提高吞吐量。

InnoDB数据页面压缩（Page Compression）技术可以使数据文件体积变小，减少降低磁盘开销，2亿行记录，可提高吞吐量（20%-30%），以较小的成本地提高了CPU的利用率。尤其是对只读业务，（例如，查询历史订单表）最为有效，同样的磁盘空间可以存储更多的数据。InnoDB提供了两种压缩技术，一种是早期的行格式压缩（COMPRESSED Row Format），它该方法是在

sed

解压缩

数据

原创 2022-05-22 12:17:52 1075 阅读

start transaction和start transaction with consistent snapshot区别

start transaction和start transaction with consistent snapshot区别，可作为面试题。废话不多说，直接上案例。表结构如下：CREATE TABLE `t1` ( `id` int NOT NULL, `name` varchar(10) DEFAULT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB;默认均

隔离级别

表结构

原创 2021-12-06 18:24:13 5722 阅读 1收藏

MySQL创建表报错信息：Row size too large (> 8126) 解决方案

ERROR 1118 (42000) at line 5: Row size too large (> 8126). Changing some columns to TEXT or BLOB may help. In current row format, BLOB prefix of 0 bytes is stored inline.解决方案：关闭InnoDB严格模式set gl

sql

html

ico

自定义

解决方案

原创 2021-10-28 18:42:06 10000+阅读 35点赞 4收藏 3评论

MySQL 8.0.18 优化器添加AntiJoin反连接优化

通常情况下，我们希望由内到外，先完成内表里的查询结果，然后驱动外查询的表，完成最终查询，但是子查询会先扫描外表中的所有数据，每条数据将会传到内表中与之关联，如果外表很大的话，那么性能上将会很差。在MySQL 8.0.18版本里，支持对NOT IN/EXISTS子查询语句，优化器内部自动反转为AntiJoin反连接查询。让我们看一个例子explain select * from t1 where i

mysql8.0

子查询

join

反连接

antijoin

原创 2019-12-20 10:59:31 1585 阅读

MySQL 8.0 Query Rewrite支持DML

MySQL 8.0 Query Rewrite支持SELECT INSERT UPDETE DELETE REPLACE语句重写这个功能要点赞，比如开发上线时，有个SQL查询字段索引忘记加了，直接把线上CPU打满，此时，你可以将SQL重写，让业务先报错，别打死数据库，然后马上通知开发回滚，等加完索引后再上线。安装插件mysql -S /tmp/mysql_hcy.sock -p123456 <

mysql8.0

sql重写

Query Rewrite

原创 2019-12-10 16:04:26 1831 阅读

Explain Analyze在MySQL 8.0.18版本中的扩展使用

在之前的版本里，我们是用explain命令来查看SQL的具体执行计划。在MySQL 8.0.18版本里新增了explain扩展，一个是explain format=tree，另一个是基于explain format=tree延伸扩展的Explain Analyze，今天我们查看下该命令是怎样执行的。还是用sbtest1表做测试。explain analyze select count(*) fro

mysql8

explain

执行计划

原创 2019-11-05 14:53:38 2892 阅读

MySQL 8.0.18 Hash Join不支持left/right join左右连接

在MySQL 8.0.18中，增加了Hash Join新功能，它适用于未创建索引的字段，做等值关联查询。在之前的版本里，如果连接的字段没有创建索引，查询速度会是非常慢的，优化器会采用BNL（块嵌套）算法。Hash Join算法是把一张小表数据存储到内存中的哈希表里，并逐行去匹配大表中的数据，计算哈希值并把符合条件的数据，从内存中返回客户端。用sysbench生成4张表，并删除默认的k字段索引。我们

hash join

哈希

mysql

原创 2019-11-04 16:27:56 2254 阅读

MariaDB FLUSH TABLES命令只关闭未使用的表

例会话一select id,sleep(60) from t1;因未执行完，t1表持有METADATA LOCK(MDL)元数据锁会话二FLUSH TABLES;在MariaDB 10.4 版本以前，执行FLUSH TABLES会把所有的表强制关闭，因会话一持有MDL元数据锁，固FLUSH TABLES会等待Waiting for table metadata lock在MariaDB 10.4

mariadb

mha

原创 2019-09-04 16:57:00 1767 阅读

MariaDB Window Functions窗口函数分组取TOP N记录

窗口函数在MariaDB10.2版本里实现，其简化了复杂SQL的撰写，提高了可读性。在某些方面，窗口函数类似于聚集函数，但它不像聚集函数那样每组只返回一个值，窗口函数可以为每组返回多个值。作为一种高级查询功能，解释起来并非易事。提供窗口函数介绍的最佳方法是通过示例，让我们看看窗口函数实现分组取TOP N记录。表结构CREATE TABLE `student` ( &

窗口函数

分析函数

mariadb

window functions

原创 2018-10-09 14:30:09 2382 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MySQL 5.7：如何有效规避 MDL 元数据锁阻塞？

utf8mb4_bin 排序规则和 utf8mb4_general_ci 的区别

MariaDB 扩展了 Limit 语法

MySQL 8.0索引合并 - 优化器如何处理OR条件查询？

MySQL 8.0 体验 UUID v7

MySQL 8.0 为 Java 开发者提供了许多强大的新特性

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

利用MySQL FIELD函数，按照你的意愿去做排序。

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 允许你在 JSON 数据上创建索引

Readyset 是 MySQL 轻量级缓存解决方案

利用InnoDB Memcached插件，大幅提升MySQL查询性能

Percona版sysbench-tpcc - 模拟真实电商业务场景压力测试工具

一招让order by id索引失效！

rank无法适配MySQL 8.0，准备迁移请留步！

一个诡异的SQL返回结果，可作为面试题

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

PERCONA 8.0 新增kill_idle_transaction参数

实现MySQL AES_ENCRYPT函数带盐 - 对字段值做加密处理

【sql_helper】自动判断条件字段是否增加索引

【王炸功能】MariaDB 10.8 Alter修改表结构实现从库无延迟并行复制

InnoDB 页面压缩Page Compression可降低磁盘开销，提高吞吐量。

start transaction和start transaction with consistent snapshot区别

MySQL创建表报错信息：Row size too large (> 8126) 解决方案

MySQL 8.0.18 优化器添加AntiJoin反连接优化

MySQL 8.0 Query Rewrite支持DML

Explain Analyze在MySQL 8.0.18版本中的扩展使用

MySQL 8.0.18 Hash Join不支持left/right join左右连接

MariaDB FLUSH TABLES命令只关闭未使用的表

MariaDB Window Functions窗口函数分组取TOP N记录

欢迎