hcymysql的博客_MySQL管理原创博文(1)

利用 mysqlsh 客户端检查升级 MySQL 8.0 兼容性

check-for-server-upgrade参数用于运行MySQL升级前检查工具，扫描当前数据库（版本5.7.42）与目标版本（8.0.41）的兼容性，识别潜在问题（如表损坏、字符集不兼容、保留关键字冲突、系统变量默认值变更等），并生成详细报告以指导用户在升级前修复或调整配置。使用：./mysqlsh -S /tmp/mysql_mysql57_1.sock -- util check-fo

mysql

sql

MySQL

原创精选 6月前 491 阅读

将 MariaDB 基于位置的复制转换为 GTID 复制

转换步骤停止所有从服务器上的复制MariaDB [test_db] STOP SLAVE; Query OK, 0 rows affected (0.007 sec) MariaDB [test_db] show slave statusG *************************** 1. row *************************** &nbs

SQL

Group

SSL

原创 6月前 169 阅读

PlanetScale SchemaDiff - 对比主从表结构是否一致

PlanetScale SchemaDiff 工具介绍概述schemadiff 是 PlanetScale 推出的数据库模式（schema）管理工具，旨在对比 MySQL 及其兼容数据库（如 PlanetScale 和 Vitess）的模式差异，并生成相应的 DDL（数据定义语言）变更语句。它主要用于数据库 schema 版本管理，帮助开发者高效、安全地执行数据库迁移。主要功能模式差异比较（Dif

数据库

Diff

MySQL

原创 7月前 186 阅读

MySQL 数据安全：利用 sql_safe_updates 与 init_connect 防范误操作

在日常的数据库开发和运维中，数据安全永远是头等大事。MySQL 提供的 sql_safe_updates（安全更新模式）正是为了防止因误操作而引发的灾难性数据更改。启用该模式后，如果执行的 UPDATE 或 DELETE 语句缺少 WHERE 条件或没有使用索引限制，MySQL 将拒绝执行操作，从而有效避免全表更新或删除的风险。使用场景：假设你是一位 Java 研发工程师，在开发过程中需要频繁修

sql

MySQL

ci

原创 7月前 138 阅读

MySQL 产品线十一大“华而不实”的工具

MySQL 产品线十一大“华而不实”的工具1）MySQL Shell客户端：MySQL Shell 支持前端JavaScript 模式，但对于大多数 DBA 和开发者来说，SQL 和 Python 是更常用的语言。前端JavaScript 模式的使用场景有限，尤其是在数据库管理和运维中，前端JavaScript 并不是主流选择。2）MySQL Workbench：在国内知名度和影响力远远不如Na

MySQL

Group

Enterprise

原创 8月前 349 阅读

MariaDB 的 RocksDB 引擎支持 TTL 索引，轻松实现自动清理过期数据

对于需要管理大量时间敏感数据的应用场景，比如缓存数据、临时会话信息或实时日志，TTL（Time To Live）索引是一种高效的解决方案。MariaDB 的 RocksDB 存储引擎提供了对 TTL 索引的支持，让开发者能够像在 MongoDB 中一样轻松设置数据的过期时间，并实现自动清理。什么是 TTL 索引？TTL 索引是一种特殊类型的索引，可以为数据设置“生存时间”。当数据的生存时间超过预

数据

开发者

存储引擎

原创精选 8月前 370 阅读

通过访问MySQL 8.0的X Protocol协议，您可以使用类似MongoDB的语法进行操作。

MySQL Document Store 是 MySQL 8.0 引入的一个新功能，旨在提供对文档数据库（如 MongoDB）的支持。它结合了传统的关系型数据库和文档数据库的优势，允许用户在同一个 MySQL 实例中同时进行结构化 SQL 查询和非结构化文档存储。MySQL Document Store 以类似MongoDB的语法风格，使用MySQL进行操作。示例：使用mysqlsh工具访问X P

MySQL

mysql

文档数据库

原创 9月前 136 阅读

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题MySQL BUG复现：影响版本：MySQL 5.7 和 8.0复现步骤：创建一个包含1000万行记录的 sbtest1 表（可以使用 sysbench 工具生成数据）。创建一个临时表 sbtest2，其结构与 sbtest1 相同：mysql> CREATE TEMPORARY TABLE sbtest2 LIKE s

MySQL

mysql

临时表空间

原创 9月前 198 阅读

一图读懂InnoDB间隙锁的工作原理

一图读懂InnoDB间隙锁的工作原理。1.t表初始数据有1、5、10三条记录。2.事务A执行 SELECT * FROM t WHERE id BETWEEN 4 AND 8 FOR UPDATE 时，会创建以下锁：(1,4)之间的间隙锁记录5的记录锁(6-8)之间的间隙锁(8-10)之间的间隙锁3.事务B尝试插入3,9,11三条记录：插入3会被(1,4)间隙锁阻塞插入9会被(8-10)间隙锁阻塞

记录锁

数据

工作原理

原创 9月前 132 阅读

一图读懂 MySQL 半同步复制与无损半同步复制的区别

1.无损半同步复制：主库先将事务记录写入二进制日志（binlog），并等待从库确认已写入中继日志（relay-log）。确认完成后，主库再将事务写入 InnoDB 存储引擎，最后返回客户端结果。在此过程中，只有在事务完全确认后，其他客户端才能看到该事务结果，确保了数据一致性。2.半同步复制：主库在写入二进制日志后直接将事务提交到存储引擎，并允许其他客户端看到该事务。与此同时，主库等待从库确认已写入

客户端

同步复制

二进制日志

原创 10月前 170 阅读 1评论

一图搞懂MySQL有序并行复制和无序并行复制的区别

核心区别在于：slave_preserve_commit_order=ON 时：虽然是并行复制（工作线程1和2同时工作）但提交顺序必须严格按照binlog顺序：11 -> 22 -> 33即使工作线程2先完成了id=2的更新，也必须等待工作线程1完成id=1的更新后才能提交slave_preserve_commit_order=OFF 时：仍然是并行复制但提交顺序取决于哪个工作线程

工作线程

数据一致性

更新数据

原创 10月前 321 阅读 1评论

一图读懂 MySQL 8.0 即时添加列的工作原理

一图读懂MySQL即时添加列的工作原理：1.添加列之前：数据字典中只记录了 id 和 name 两列的定义数据文件中存储着实际的行数据2.使用 ALGORITHM=INSTANT 添加列后：只更新元数据（数据字典），添加新列的定义和默认值原有数据文件保持不变，无需重建表读取数据时，MySQL会自动为旧行的新列填充默认值新插入的行会包含新列的实际值这就是为什么即时添加列能够这么快的原因：无需移动

数据文件

默认值

MySQL

原创 10月前 250 阅读

统计 MySQL 每小时生成多少 binlog 文件

这个脚本的功能是统计/data/目录下 MySQL binlog 文件的数量、每个日期生成的总大小（MB），以及每小时的平均大小（MB）执行下面的命令：find . -name "mysql-bin.*" -exec ls -lt --time-style=+%F {} \; | \ awk 'BEGIN { FS=" "; printf "%-12s %-8s %-15s %-1

MySQL

mysql

原创 10月前 297 阅读

一图读懂MySQL并行复制发展史。

下面通过一个案例，用通俗易懂的方式来解释这两种复制模式。COMMIT_ORDER（时间戳顺序模式）：想象你在一家餐厅排队点餐：不管你点什么菜，都必须按照取号的顺序来处理比如：张三8点取号、李四8:05取号、王五8:10取号即使张三点了牛肉面、李四点了炒青菜、王五点了饺子（完全不冲突的菜品）厨房也必须按照8点、8:05、8:10的顺序来严格处理这就像一个严格的队列，先来先服务，不管具体点的是什么W

数据集

先来先服务

时间戳

原创 11月前 345 阅读

Percona Server 8.0.39 For Centos7 二进制版本

由于Percona官方不提供8.0.39 for Centos7二进制版本下载，特源码编译。链接：https://github.com/hcymysql/ps8039/releases/tag/ps8039-centos7

github

源码编译

mysql

原创 11月前 157 阅读

巧用 CTE 公共表达式删除 MySQL 重复数据

一段时间后，大多数应用程序可能由于bug而出现重复行，这不仅影响用户体验，还增加了存储需求并降低数据库性能。可以通过一个 SQL 查询来完成整个清理过程，从而有效解决这一问题。使用范例-- 创建表 CREATE TABLE users ( id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(100), email VARCHAR(

重复数据

mysql

MySQL

原创精选 2024-10-11 14:59:27 323 阅读

借助 summarize_binlogs.sh 脚本，深入排查 MySQL 主从复制延迟问题

summarize_binlogs - MySQL Binlog分析统计概述命令帮助# /root/summarize_binlogs.sh Error: Binlog file is required. Usage: /root/summarize_binlogs.sh -f <binlog_file> [-s <start_time>] [-e <end_time

mysql

MySQL

二进制日志

原创 2024-10-10 12:01:05 266 阅读

Oracle 轻松迁移至 MariaDB

从Oracle数据库迁移到MySQL存在一定的技术挑战，主要体现在数据类型、存储过程语法以及系统函数等方面的不兼容性。这种迁移通常需要大量的人力物力投入，包括schema重构、代码重写等工作。然而，将Oracle数据库迁移到MariaDB则是一个出人意料的高效选择。MariaDB提供了一个创新的Oracle兼容模式，只需简单配置即可实现近乎无缝的迁移。具体而言，通过设置SQL模式为Oracle模式

数据类型

数据库迁移

存储过程

原创精选 2024-09-29 08:44:04 503 阅读

MySQL 脱敏函数使用

1. 身份证号、手机号、银行卡号采用 Percona data_masking.so 插件脱敏https://docs.percona.com/percona-server/8.0/data-masking-plugin-functions.html安装脱敏插件mysql> INSTALL PLUGIN data_masking SONAME 'data_masking.so'; mys

mysql

sql

github

原创 2024-09-25 10:50:17 535 阅读

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

介绍MariaDB MaxScale的NoSQL协议模块是一个强大而独特的功能，它允许使用MongoDB协议与MariaDB数据库进行交互。以下是该模块的主要特点:协议转换: 将MongoDB的查询语言和操作转换为SQL语句。使得应用程序可以使用MongoDB的驱动程序与MariaDB/MySQL通信。无缝集成: 允许现有的MongoDB应用程序直接连接到MariaDB/MySQL,无需修改应用程

nosql

MySQL

JSON

原创精选 2024-09-06 23:44:54 552 阅读 1点赞 yyds干货盘点

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

当达到行版本64次限制时，操作将被拒绝，并给出错误信息，建议使用 COPY 或 INPLACE 算法重建表。4092 (HY000): Maximum row versions reached for table test/t1. No more columns can be added or dropped instantly. Please use COPY/INPLACE.自 MySQL 9

sql

存储过程

MySQL

原创 2024-08-30 10:16:45 495 阅读

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。-- 创建user表，包含id、手机号加密字段（mobile）、以及用于加密的随机盐字段（salt） CREATE TABLE `user` ( `id` INT NOT NULL AUTO_INCREMENT COMMENT '主键ID', `mobile` VARBINARY(255) COMMENT '加密后的手机号',

字段

数据

MySQL

原创 2024-08-27 16:23:50 443 阅读

ProxySQL 如何设置 MySQL 从库的故障转移功能？

在 ProxySQL 的默认配置下，当所有从库出现故障时，查询请求不会自动切换到主库，这会导致业务中断。以下是一个示例说明：假设你的架构是一主一从，主库监听在 6666 端口，从库监听在 6667 端口。Admin> SELECT hostgroup_id, hostname, port, status, weight FROM mysql_servers; +--------------+

mysql

sql

Server

原创精选 2024-08-23 10:06:08 551 阅读

ProxyWeb 是 ProxySQL 的图形可视化平台

ProxySQL 是一款专为 MySQL 设计的开源高性能、高可用性的数据库软件。它具备对数据库协议的感知能力，能够优化 MySQL 的性能和可用性。然而，由于 ProxySQL 的管理参数和监控选项繁多，默认的控制台命令行方式可能显得不够直观且不便ProxyWeb 是一款用于管理 ProxySQL 的图形化可视化平台。它旨在简化 ProxySQL 的管理流程，特别是针对繁多的参数配置和监控选项。

MySQL

数据库

图形化

原创 2024-08-21 15:58:31 446 阅读

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析json

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析jsonpt-slave-repair 工具介绍MySQL主从复制作为一种常见的数据同步方式，有时候会出现同步错误导致同步中断的情况。手动修复这些同步错误通常需要耗费时间和精力，并且对于不熟悉MySQL复制的人来说比较困难。pt-slave-repair是对原有pt-slave-restart工具

MySQL

解析json

版本号

原创 2024-08-13 10:37:07 145 阅读 1收藏

reverse_sql 新增支持字段是json或text类型binlog解析

reverse_sql 工具介绍reverse_sql 是一个用于解析和转换 MySQL 二进制日志（binlog）的工具。它可以将二进制日志文件中记录的数据库更改操作（如插入、更新、删除）转换为反向的 SQL 语句，以便进行数据恢复。其运行模式需二进制日志设置为 ROW 格式。reverse_sql工具版本号: 2.1.2，更新日期：2024-08-09 - 增加表字段是json或text类型的

二进制日志

sql

字段

原创 2024-08-09 20:55:59 401 阅读 1收藏

用 MySQL 实现 JSON 格式的数据存储

在绝大多数业务场景中，分布式数据库并非必需。事实上，约80%的应用程序都可以在单机环境下高效运行。对于绝大多数企业而言，数据库的数据量通常不会达到 TB 级别。在现代应用开发中，json 已成为数据交换和存储的常见格式。尽管 MongoDB 因其天然支持 json 而备受推崇，但 MySQL 也提供了强大的 json 数据类型支持，能够高效地处理 json 数据。在本指南中，我们将探讨如何使用My

JSON

json

mysql

原创精选 2024-08-05 14:36:53 703 阅读

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。接下来，我通过一个案例来演示这一点。https://dev.mysql.com/doc/refman/8.0/en/create-table-check-constraints.html我们创建一个名为 scores 的表，表中的 CHECK 约束确保 score 字段的值不能为 0。如果尝试插入值为 0 的记录，MySQL 将会抛

MySQL

SQL

mysql

原创 2024-08-02 14:33:13 176 阅读

ProxySQL 设置拦截危险SQL

操作 MySQL 数据库是十分危险的，生产环境，经常会有人因手滑把数据误改或者误删，那么如何避免？我的规则是：delete from，这种SQL禁止执行delete from...where 1=1，这种SQL禁止执行update ... set ...，这种SQL禁止执行update ... set ...where 1=1，这种SQL禁止执行实施访问ProxySQL的6032管理端口mysql

mysql

SQL

误删

原创 2024-08-01 17:09:07 704 阅读

用 ProxySQL 实现 MySQL 的读写分离

是的，这个世界80%的业务都不需要分布式数据库，单机MySQL加一个读写分离足矣。今天我带你用 ProxySQL 实现 MySQL 的读写分离。功能：将 "select ... for update" 语句和增删改（insert/update/delete）语句发送到主库。将 select 只读查询语句发送到从库。如果从库的复制延迟超过10秒，ProxySQL会将查询路由到其他可用的从库，如果从库

mysql

服务器

读写分离

原创精选 2024-07-30 16:20:51 736 阅读 1点赞 1收藏

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

利用 mysqlsh 客户端检查升级 MySQL 8.0 兼容性

将 MariaDB 基于位置的复制转换为 GTID 复制

PlanetScale SchemaDiff - 对比主从表结构是否一致

MySQL 数据安全：利用 sql_safe_updates 与 init_connect 防范误操作

MySQL 产品线十一大“华而不实”的工具

MariaDB 的 RocksDB 引擎支持 TTL 索引，轻松实现自动清理过期数据

通过访问MySQL 8.0的X Protocol协议，您可以使用类似MongoDB的语法进行操作。

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题

一图读懂InnoDB间隙锁的工作原理

一图读懂 MySQL 半同步复制与无损半同步复制的区别

一图搞懂MySQL有序并行复制和无序并行复制的区别

一图读懂 MySQL 8.0 即时添加列的工作原理

统计 MySQL 每小时生成多少 binlog 文件

一图读懂MySQL并行复制发展史。

Percona Server 8.0.39 For Centos7 二进制版本

巧用 CTE 公共表达式删除 MySQL 重复数据

借助 summarize_binlogs.sh 脚本，深入排查 MySQL 主从复制延迟问题

Oracle 轻松迁移至 MariaDB

MySQL 脱敏函数使用

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

ProxySQL 如何设置 MySQL 从库的故障转移功能？

ProxyWeb 是 ProxySQL 的图形可视化平台

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析json

reverse_sql 新增支持字段是json或text类型binlog解析

用 MySQL 实现 JSON 格式的数据存储

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。

ProxySQL 设置拦截危险SQL

用 ProxySQL 实现 MySQL 的读写分离

欢迎