hcymysql的博客_python,Mysql,MongoDB,redis,自动化运维,MySQL管理,MySQL优化,日常工作(1)

按发布时间
按阅读量
2024年 87篇

全部332篇
2025年10篇 03月2篇 02月3篇 01月5篇 2024年87篇 12月4篇 11月5篇 10月5篇 09月12篇 08月11篇 07月11篇 06月9篇 05月2篇 04月4篇 03月1篇 02月12篇 01月11篇 2023年41篇 12月17篇 11月6篇 10月5篇 09月2篇 08月2篇 07月1篇 06月3篇 05月3篇 02月1篇 01月1篇 2022年14篇 12月2篇 07月1篇 06月5篇 05月2篇 04月1篇 02月2篇 01月1篇 2021年7篇 12月2篇 11月2篇 10月1篇 07月1篇 01月1篇 2020年13篇 12月1篇 10月1篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 03月1篇 01月1篇 2019年17篇 12月6篇 11月6篇 10月1篇 09月1篇 08月1篇 04月1篇 03月1篇 2018年15篇 12月1篇 11月1篇 10月3篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 01月1篇 2017年9篇 12月1篇 11月1篇 07月1篇 05月2篇 04月1篇 01月3篇 2016年9篇 12月1篇 11月2篇 10月1篇 08月1篇 06月1篇 03月2篇 02月1篇 2015年20篇 10月6篇 09月3篇 08月1篇 07月1篇 06月2篇 04月1篇 03月3篇 02月1篇 01月2篇 2014年61篇 11月8篇 10月4篇 09月5篇 07月3篇 06月5篇 05月8篇 04月6篇 03月8篇 02月11篇 01月3篇 2013年9篇 12月3篇 11月4篇 05月1篇 04月1篇 2012年20篇 12月1篇 11月3篇 10月4篇 09月3篇 08月2篇 07月1篇 06月6篇
推荐/精选
全部

全部原创转载翻译

MySQL 8.0 体验 UUID v7

UUID v7 和 UUID v1 之间存在几个显著的区别，主要体现在生成方式、结构、安全性和适用场景等方面。主要区别UUID v1：由时间戳、MAC 地址和时钟序列生成。它依赖于设备的硬件地址（MAC 地址），因此在同一设备上生成的 UUID 可能会泄露设备信息。UUID v7：结合了 Unix 时间戳和随机数生成。UUID v7 不使用 MAC 地址，而是完全依赖随机数，从而提高了隐私和安全性

mysql

时间戳

随机数

原创 9月前 621 阅读

通过访问MySQL 8.0的X Protocol协议，您可以使用类似MongoDB的语法进行操作。

MySQL Document Store 是 MySQL 8.0 引入的一个新功能，旨在提供对文档数据库（如 MongoDB）的支持。它结合了传统的关系型数据库和文档数据库的优势，允许用户在同一个 MySQL 实例中同时进行结构化 SQL 查询和非结构化文档存储。MySQL Document Store 以类似MongoDB的语法风格，使用MySQL进行操作。示例：使用mysqlsh工具访问X P

MySQL

mysql

文档数据库

原创 9月前 135 阅读

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题MySQL BUG复现：影响版本：MySQL 5.7 和 8.0复现步骤：创建一个包含1000万行记录的 sbtest1 表（可以使用 sysbench 工具生成数据）。创建一个临时表 sbtest2，其结构与 sbtest1 相同：mysql> CREATE TEMPORARY TABLE sbtest2 LIKE s

MySQL

mysql

临时表空间

原创 9月前 198 阅读

一图读懂InnoDB间隙锁的工作原理

一图读懂InnoDB间隙锁的工作原理。1.t表初始数据有1、5、10三条记录。2.事务A执行 SELECT * FROM t WHERE id BETWEEN 4 AND 8 FOR UPDATE 时，会创建以下锁：(1,4)之间的间隙锁记录5的记录锁(6-8)之间的间隙锁(8-10)之间的间隙锁3.事务B尝试插入3,9,11三条记录：插入3会被(1,4)间隙锁阻塞插入9会被(8-10)间隙锁阻塞

记录锁

数据

工作原理

原创 9月前 132 阅读

一图读懂 MySQL 半同步复制与无损半同步复制的区别

1.无损半同步复制：主库先将事务记录写入二进制日志（binlog），并等待从库确认已写入中继日志（relay-log）。确认完成后，主库再将事务写入 InnoDB 存储引擎，最后返回客户端结果。在此过程中，只有在事务完全确认后，其他客户端才能看到该事务结果，确保了数据一致性。2.半同步复制：主库在写入二进制日志后直接将事务提交到存储引擎，并允许其他客户端看到该事务。与此同时，主库等待从库确认已写入

客户端

同步复制

二进制日志

原创 10月前 170 阅读 1评论

一图搞懂MySQL有序并行复制和无序并行复制的区别

核心区别在于：slave_preserve_commit_order=ON 时：虽然是并行复制（工作线程1和2同时工作）但提交顺序必须严格按照binlog顺序：11 -> 22 -> 33即使工作线程2先完成了id=2的更新，也必须等待工作线程1完成id=1的更新后才能提交slave_preserve_commit_order=OFF 时：仍然是并行复制但提交顺序取决于哪个工作线程

工作线程

数据一致性

更新数据

原创 10月前 321 阅读 1评论

一图读懂MySQL组复制工作原理

一图读懂MySQL组复制工作原理初始阶段：客户端向主节点发起事务提交请求主节点收集写入集(writeset)，包含变更数据和主键信息复制与认证阶段：通过组通信系统将写入集复制到所有节点所有节点进行认证测试（冲突检测）提交阶段：如果认证成功，从节点当前返回成功信号主要节点提交事务并响应客户端特别说明：这是“虚拟”全部同步复制，从节点返回成功后可能尚未完成实际写入存在短暂的数据偏差为避免不一致，建议在

客户端

数据

MySQL

原创 10月前 123 阅读

一图读懂 MySQL 8.0 即时添加列的工作原理

一图读懂MySQL即时添加列的工作原理：1.添加列之前：数据字典中只记录了 id 和 name 两列的定义数据文件中存储着实际的行数据2.使用 ALGORITHM=INSTANT 添加列后：只更新元数据（数据字典），添加新列的定义和默认值原有数据文件保持不变，无需重建表读取数据时，MySQL会自动为旧行的新列填充默认值新插入的行会包含新列的实际值这就是为什么即时添加列能够这么快的原因：无需移动

数据文件

默认值

MySQL

原创 10月前 250 阅读

统计 MySQL 每小时生成多少 binlog 文件

这个脚本的功能是统计/data/目录下 MySQL binlog 文件的数量、每个日期生成的总大小（MB），以及每小时的平均大小（MB）执行下面的命令：find . -name "mysql-bin.*" -exec ls -lt --time-style=+%F {} \; | \ awk 'BEGIN { FS=" "; printf "%-12s %-8s %-15s %-1

MySQL

mysql

原创 10月前 297 阅读

一图读懂MySQL并行复制发展史。

下面通过一个案例，用通俗易懂的方式来解释这两种复制模式。COMMIT_ORDER（时间戳顺序模式）：想象你在一家餐厅排队点餐：不管你点什么菜，都必须按照取号的顺序来处理比如：张三8点取号、李四8:05取号、王五8:10取号即使张三点了牛肉面、李四点了炒青菜、王五点了饺子（完全不冲突的菜品）厨房也必须按照8点、8:05、8:10的顺序来严格处理这就像一个严格的队列，先来先服务，不管具体点的是什么W

数据集

先来先服务

时间戳

原创 11月前 345 阅读

Percona Server 8.0.39 For Centos7 二进制版本

由于Percona官方不提供8.0.39 for Centos7二进制版本下载，特源码编译。链接：https://github.com/hcymysql/ps8039/releases/tag/ps8039-centos7

github

源码编译

mysql

原创 11月前 157 阅读

Trdsql - 使用 SQL 语句对 CSV 和 JSON 文件进行处理。

Trdsql 是一个轻量级的命令行工具，它能让你直接使用 SQL 语句对 CSV 和 JSON 文件进行处理。对于那些已经熟悉 SQL 语法的用户来说，trdsql 几乎不需要任何额外的学习成本，可以轻松上手。通过这一工具，用户可以快速地查询、过滤和操作数据文件，从而省去学习新语言或工具的时间。对于时间有限的开发者或数据分析师来说，trdsql 无疑是一种高效的解决方案。https://githu

json

JSON

字段

原创精选 2024-10-12 14:42:46 308 阅读

巧用 CTE 公共表达式删除 MySQL 重复数据

一段时间后，大多数应用程序可能由于bug而出现重复行，这不仅影响用户体验，还增加了存储需求并降低数据库性能。可以通过一个 SQL 查询来完成整个清理过程，从而有效解决这一问题。使用范例-- 创建表 CREATE TABLE users ( id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(100), email VARCHAR(

重复数据

mysql

MySQL

原创精选 2024-10-11 14:59:27 323 阅读

借助 summarize_binlogs.sh 脚本，深入排查 MySQL 主从复制延迟问题

summarize_binlogs - MySQL Binlog分析统计概述命令帮助# /root/summarize_binlogs.sh Error: Binlog file is required. Usage: /root/summarize_binlogs.sh -f <binlog_file> [-s <start_time>] [-e <end_time

mysql

MySQL

二进制日志

原创 2024-10-10 12:01:05 266 阅读

Oracle 轻松迁移至 MariaDB

从Oracle数据库迁移到MySQL存在一定的技术挑战，主要体现在数据类型、存储过程语法以及系统函数等方面的不兼容性。这种迁移通常需要大量的人力物力投入，包括schema重构、代码重写等工作。然而，将Oracle数据库迁移到MariaDB则是一个出人意料的高效选择。MariaDB提供了一个创新的Oracle兼容模式，只需简单配置即可实现近乎无缝的迁移。具体而言，通过设置SQL模式为Oracle模式

数据类型

数据库迁移

存储过程

原创精选 2024-09-29 08:44:04 503 阅读

MySQL 8.0 为 Java 开发者提供了许多强大的新特性

以下是一些关键点：1.通用表表达式 (CTE): CTE 允许您定义命名的临时结果集,这些结果集可以在后续的SELECT、INSERT、UPDATE、DELETE或CREATE VIEW语句中被引用。这对于编写复杂查询特别有用。WITH RECURSIVE employee_hierarchy AS ( SELECT id, name, manager_id, 1 AS level FRO

MySQL

主键

JSON

原创精选 2024-09-27 13:48:57 478 阅读

MongoDB TTL索引的使用

在实际开发中，不少Java开发者会将日志类的debug信息存储到MongoDB中，以便在问题发生时进行排查。然而，这些过期的冗余数据长期占用磁盘空间，给系统带来了不小的负担。如何有效地清理这些垃圾数据呢？MongoDB的TTL索引提供了一个优雅的解决方案。TTL索引是一种特殊的单字段索引，它通过监控文档中的指定日期字段，一旦该字段的值超过了设定的过期时间，MongoDB就会自动删除该文档。下面我们

字段

数据

后台进程

原创精选 2024-09-26 10:53:47 381 阅读

MySQL 脱敏函数使用

1. 身份证号、手机号、银行卡号采用 Percona data_masking.so 插件脱敏https://docs.percona.com/percona-server/8.0/data-masking-plugin-functions.html安装脱敏插件mysql> INSTALL PLUGIN data_masking SONAME 'data_masking.so'; mys

mysql

sql

github

原创 2024-09-25 10:50:17 534 阅读

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。用户级锁不直接与InnoDB的内部行或表锁定机制交互。用户级锁使用 GET_LOCK()、RELEASE_LOCK() 函数进行管理。用户级锁提供了更细粒度的控制，让你能在应用层实施自定义加锁策略。主要函数包括：GET_LOCK(name, timeout)：获取指定的锁。如果另一个会话持

MySQL

开发人员

互斥

原创 2024-09-18 14:52:45 155 阅读

利用MySQL FIELD函数，按照你的意愿去做排序。

ORDER BY 与 FIELD结合：通过将FIELD函数放在ORDER BY子句中，我们可以自定义排序顺序，而不是按照默认的升序或降序排序。下面我将创建一个名为students的表，插入10条记录，并使用ORDER BY FIELD函数举例说明其用法。演示1.创建表CREATE TABLE students ( id INT PRIMARY KEY, name VARCHAR(5

Grace

升序

字段

原创 2024-09-14 14:24:52 215 阅读

MongoDB 审计功能：增强安全性与合规性

MongoDB的审计功能是提升数据库安全性和合规性的关键工具。通过详细记录数据操作，特别是数据删除事件，审计日志可以帮助管理员快速识别潜在的安全威胁，并在必要时采取相应的问责措施。为什么选择 Percona MongoDB 企业版？虽然MongoDB社区版不支持审计功能，但Percona MongoDB企业版（免费开源）提供了这一强大的特性。Percona版本不仅保留了MongoDB的核心功能，还

mongodb

企业版

JSON

原创 2024-09-12 14:27:56 198 阅读

实时监控MongoDB运行状态，就像你在MySQL里，执行show processlist一样

要想查看 MongoDB 服务器中运行的进程/查询，你需要执行db.currentOp()命令，但该命令返回冗长的 JSON，包括复制线程、系统线程等，排查问题时很是困难。作为一名有 MySQL 背景的 DBA，如果能在 MongoDB 里可以使用 MySQL 的 "show processlist"命令，那将是完美的。mongodb_process_checker工具或许可以帮助你。https:

mongodb

MySQL

服务器

原创 2024-09-10 11:05:25 516 阅读

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

介绍MariaDB MaxScale的NoSQL协议模块是一个强大而独特的功能，它允许使用MongoDB协议与MariaDB数据库进行交互。以下是该模块的主要特点:协议转换: 将MongoDB的查询语言和操作转换为SQL语句。使得应用程序可以使用MongoDB的驱动程序与MariaDB/MySQL通信。无缝集成: 允许现有的MongoDB应用程序直接连接到MariaDB/MySQL,无需修改应用程

nosql

MySQL

JSON

原创精选 2024-09-06 23:44:54 552 阅读 1点赞 yyds干货盘点

mongosync 工具可以在两个集群之间持续同步数据

mongosync 工具可以在两个集群之间持续同步数据，适用于异地机房灾备。 https://www.mongodb.com/zh-cn/docs/cluster-to-cluster-sync/current/工作原理：Mongosync 首先对源数据库进行完整的初始复制。- 全量同步Mongosync 会持续监听源数据库的变更流（Change Stream）- 增量同步如果同步过程中断，它可以

mongodb

副本集

原创 2024-09-05 09:55:22 348 阅读

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 8.0 新增 JSON_TABLE 函数的使用通过 JSON_TABLE 函数，可以将 JSON 文档中的数据提取出来，并以表格的形式返回客户端。基本用法：JSON_TABLE( json_doc, path COLUMNS (column_list) ) [AS] alias其中：json_doc 是 JSON 文档（可以是一个 JSON 列或 JSON 字符串）pa

JSON

mysql

原创 2024-09-03 10:19:33 903 阅读

MySQL 允许你在 JSON 数据上创建索引

MySQL 允许你在 JSON 数据上创建索引测试用例CREATE TABLE `student` ( `id` int NOT NULL AUTO_INCREMENT, `name` varchar(255) DEFAULT NULL, `age` int DEFAULT NULL, `courses` json DEFAULT NULL, `address` json DE

JSON

mysql

数据

原创精选 2024-09-03 09:38:18 411 阅读

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

当达到行版本64次限制时，操作将被拒绝，并给出错误信息，建议使用 COPY 或 INPLACE 算法重建表。4092 (HY000): Maximum row versions reached for table test/t1. No more columns can be added or dropped instantly. Please use COPY/INPLACE.自 MySQL 9

sql

存储过程

MySQL

原创 2024-08-30 10:16:45 500 阅读

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。-- 创建user表，包含id、手机号加密字段（mobile）、以及用于加密的随机盐字段（salt） CREATE TABLE `user` ( `id` INT NOT NULL AUTO_INCREMENT COMMENT '主键ID', `mobile` VARBINARY(255) COMMENT '加密后的手机号',

字段

数据

MySQL

原创 2024-08-27 16:23:50 443 阅读

ProxySQL 如何设置 MySQL 从库的故障转移功能？

在 ProxySQL 的默认配置下，当所有从库出现故障时，查询请求不会自动切换到主库，这会导致业务中断。以下是一个示例说明：假设你的架构是一主一从，主库监听在 6666 端口，从库监听在 6667 端口。Admin> SELECT hostgroup_id, hostname, port, status, weight FROM mysql_servers; +--------------+

mysql

sql

Server

原创精选 2024-08-23 10:06:08 551 阅读

ProxyWeb 是 ProxySQL 的图形可视化平台

ProxySQL 是一款专为 MySQL 设计的开源高性能、高可用性的数据库软件。它具备对数据库协议的感知能力，能够优化 MySQL 的性能和可用性。然而，由于 ProxySQL 的管理参数和监控选项繁多，默认的控制台命令行方式可能显得不够直观且不便ProxyWeb 是一款用于管理 ProxySQL 的图形化可视化平台。它旨在简化 ProxySQL 的管理流程，特别是针对繁多的参数配置和监控选项。

MySQL

数据库

图形化

原创 2024-08-21 15:58:31 446 阅读

欢迎

首页
1
2
3
共87条记录

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MySQL 8.0 体验 UUID v7

通过访问MySQL 8.0的X Protocol协议，您可以使用类似MongoDB的语法进行操作。

MariaDB（11.4 GA）解决了MySQL临时表空间无限增大的问题

一图读懂InnoDB间隙锁的工作原理

一图读懂 MySQL 半同步复制与无损半同步复制的区别

一图搞懂MySQL有序并行复制和无序并行复制的区别

一图读懂MySQL组复制工作原理

一图读懂 MySQL 8.0 即时添加列的工作原理

统计 MySQL 每小时生成多少 binlog 文件

一图读懂MySQL并行复制发展史。

Percona Server 8.0.39 For Centos7 二进制版本

Trdsql - 使用 SQL 语句对 CSV 和 JSON 文件进行处理。

巧用 CTE 公共表达式删除 MySQL 重复数据

借助 summarize_binlogs.sh 脚本，深入排查 MySQL 主从复制延迟问题

Oracle 轻松迁移至 MariaDB

MySQL 8.0 为 Java 开发者提供了许多强大的新特性

MongoDB TTL索引的使用

MySQL 脱敏函数使用

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

利用MySQL FIELD函数，按照你的意愿去做排序。

MongoDB 审计功能：增强安全性与合规性

实时监控MongoDB运行状态，就像你在MySQL里，执行show processlist一样

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

mongosync 工具可以在两个集群之间持续同步数据

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 允许你在 JSON 数据上创建索引

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

ProxySQL 如何设置 MySQL 从库的故障转移功能？

ProxyWeb 是 ProxySQL 的图形可视化平台

欢迎