hcymysql的博客_python,Mysql,自动化运维,MongoDB,redis,MySQL管理,MySQL优化,日常工作(2)

按发布时间
按阅读量
时间轴

全部332篇
2025年10篇 03月2篇 02月3篇 01月5篇 2024年87篇 12月4篇 11月5篇 10月5篇 09月12篇 08月11篇 07月11篇 06月9篇 05月2篇 04月4篇 03月1篇 02月12篇 01月11篇 2023年41篇 12月17篇 11月6篇 10月5篇 09月2篇 08月2篇 07月1篇 06月3篇 05月3篇 02月1篇 01月1篇 2022年14篇 12月2篇 07月1篇 06月5篇 05月2篇 04月1篇 02月2篇 01月1篇 2021年7篇 12月2篇 11月2篇 10月1篇 07月1篇 01月1篇 2020年13篇 12月1篇 10月1篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 03月1篇 01月1篇 2019年17篇 12月6篇 11月6篇 10月1篇 09月1篇 08月1篇 04月1篇 03月1篇 2018年15篇 12月1篇 11月1篇 10月3篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 01月1篇 2017年9篇 12月1篇 11月1篇 07月1篇 05月2篇 04月1篇 01月3篇 2016年9篇 12月1篇 11月2篇 10月1篇 08月1篇 06月1篇 03月2篇 02月1篇 2015年20篇 10月6篇 09月3篇 08月1篇 07月1篇 06月2篇 04月1篇 03月3篇 02月1篇 01月2篇 2014年61篇 11月8篇 10月4篇 09月5篇 07月3篇 06月5篇 05月8篇 04月6篇 03月8篇 02月11篇 01月3篇 2013年9篇 12月3篇 11月4篇 05月1篇 04月1篇 2012年20篇 12月1篇 11月3篇 10月4篇 09月3篇 08月2篇 07月1篇 06月6篇
推荐/精选
全部

全部原创转载翻译

MySQL 脱敏函数使用

1. 身份证号、手机号、银行卡号采用 Percona data_masking.so 插件脱敏https://docs.percona.com/percona-server/8.0/data-masking-plugin-functions.html安装脱敏插件mysql> INSTALL PLUGIN data_masking SONAME 'data_masking.so'; mys

mysql

sql

github

原创 2024-09-25 10:50:17 547 阅读

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。用户级锁不直接与InnoDB的内部行或表锁定机制交互。用户级锁使用 GET_LOCK()、RELEASE_LOCK() 函数进行管理。用户级锁提供了更细粒度的控制，让你能在应用层实施自定义加锁策略。主要函数包括：GET_LOCK(name, timeout)：获取指定的锁。如果另一个会话持

MySQL

开发人员

互斥

原创 2024-09-18 14:52:45 155 阅读

利用MySQL FIELD函数，按照你的意愿去做排序。

ORDER BY 与 FIELD结合：通过将FIELD函数放在ORDER BY子句中，我们可以自定义排序顺序，而不是按照默认的升序或降序排序。下面我将创建一个名为students的表，插入10条记录，并使用ORDER BY FIELD函数举例说明其用法。演示1.创建表CREATE TABLE students ( id INT PRIMARY KEY, name VARCHAR(5

Grace

升序

字段

原创 2024-09-14 14:24:52 215 阅读

MongoDB 审计功能：增强安全性与合规性

MongoDB的审计功能是提升数据库安全性和合规性的关键工具。通过详细记录数据操作，特别是数据删除事件，审计日志可以帮助管理员快速识别潜在的安全威胁，并在必要时采取相应的问责措施。为什么选择 Percona MongoDB 企业版？虽然MongoDB社区版不支持审计功能，但Percona MongoDB企业版（免费开源）提供了这一强大的特性。Percona版本不仅保留了MongoDB的核心功能，还

mongodb

企业版

JSON

原创 2024-09-12 14:27:56 197 阅读

实时监控MongoDB运行状态，就像你在MySQL里，执行show processlist一样

要想查看 MongoDB 服务器中运行的进程/查询，你需要执行db.currentOp()命令，但该命令返回冗长的 JSON，包括复制线程、系统线程等，排查问题时很是困难。作为一名有 MySQL 背景的 DBA，如果能在 MongoDB 里可以使用 MySQL 的 "show processlist"命令，那将是完美的。mongodb_process_checker工具或许可以帮助你。https:

mongodb

MySQL

服务器

原创 2024-09-10 11:05:25 518 阅读

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

介绍MariaDB MaxScale的NoSQL协议模块是一个强大而独特的功能，它允许使用MongoDB协议与MariaDB数据库进行交互。以下是该模块的主要特点:协议转换: 将MongoDB的查询语言和操作转换为SQL语句。使得应用程序可以使用MongoDB的驱动程序与MariaDB/MySQL通信。无缝集成: 允许现有的MongoDB应用程序直接连接到MariaDB/MySQL,无需修改应用程

nosql

MySQL

JSON

原创精选 2024-09-06 23:44:54 553 阅读 1点赞 yyds干货盘点

mongosync 工具可以在两个集群之间持续同步数据

mongosync 工具可以在两个集群之间持续同步数据，适用于异地机房灾备。 https://www.mongodb.com/zh-cn/docs/cluster-to-cluster-sync/current/工作原理：Mongosync 首先对源数据库进行完整的初始复制。- 全量同步Mongosync 会持续监听源数据库的变更流（Change Stream）- 增量同步如果同步过程中断，它可以

mongodb

副本集

原创 2024-09-05 09:55:22 358 阅读

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 8.0 新增 JSON_TABLE 函数的使用通过 JSON_TABLE 函数，可以将 JSON 文档中的数据提取出来，并以表格的形式返回客户端。基本用法：JSON_TABLE( json_doc, path COLUMNS (column_list) ) [AS] alias其中：json_doc 是 JSON 文档（可以是一个 JSON 列或 JSON 字符串）pa

JSON

mysql

原创 2024-09-03 10:19:33 905 阅读

MySQL 允许你在 JSON 数据上创建索引

MySQL 允许你在 JSON 数据上创建索引测试用例CREATE TABLE `student` ( `id` int NOT NULL AUTO_INCREMENT, `name` varchar(255) DEFAULT NULL, `age` int DEFAULT NULL, `courses` json DEFAULT NULL, `address` json DE

JSON

mysql

数据

原创精选 2024-09-03 09:38:18 411 阅读

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

当达到行版本64次限制时，操作将被拒绝，并给出错误信息，建议使用 COPY 或 INPLACE 算法重建表。4092 (HY000): Maximum row versions reached for table test/t1. No more columns can be added or dropped instantly. Please use COPY/INPLACE.自 MySQL 9

sql

存储过程

MySQL

原创 2024-08-30 10:16:45 503 阅读

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。-- 创建user表，包含id、手机号加密字段（mobile）、以及用于加密的随机盐字段（salt） CREATE TABLE `user` ( `id` INT NOT NULL AUTO_INCREMENT COMMENT '主键ID', `mobile` VARBINARY(255) COMMENT '加密后的手机号',

字段

数据

MySQL

原创 2024-08-27 16:23:50 443 阅读

ProxySQL 如何设置 MySQL 从库的故障转移功能？

在 ProxySQL 的默认配置下，当所有从库出现故障时，查询请求不会自动切换到主库，这会导致业务中断。以下是一个示例说明：假设你的架构是一主一从，主库监听在 6666 端口，从库监听在 6667 端口。Admin> SELECT hostgroup_id, hostname, port, status, weight FROM mysql_servers; +--------------+

mysql

sql

Server

原创精选 2024-08-23 10:06:08 551 阅读

ProxyWeb 是 ProxySQL 的图形可视化平台

ProxySQL 是一款专为 MySQL 设计的开源高性能、高可用性的数据库软件。它具备对数据库协议的感知能力，能够优化 MySQL 的性能和可用性。然而，由于 ProxySQL 的管理参数和监控选项繁多，默认的控制台命令行方式可能显得不够直观且不便ProxyWeb 是一款用于管理 ProxySQL 的图形化可视化平台。它旨在简化 ProxySQL 的管理流程，特别是针对繁多的参数配置和监控选项。

MySQL

数据库

图形化

原创 2024-08-21 15:58:31 446 阅读

Readyset 是 MySQL 轻量级缓存解决方案

简介Readyset 是一种轻量级缓存解决方案，利用内存来存储缓存数据，实现复杂的 SQL 闪电般快速查询。 Readyset 介于应用程序和数据库之间，是一个Cache层。相当于Redis/Memcached的作用，但它不需要更改你的一行代码。架构Java/PHP应用程序 -> Readyset -> MySQL数据库Readyset 的工作流程如下:对于读操作:您直接向

缓存

SQL

数据库

原创精选 2024-08-19 15:07:02 541 阅读 1收藏 1评论

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析json

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析jsonpt-slave-repair 工具介绍MySQL主从复制作为一种常见的数据同步方式，有时候会出现同步错误导致同步中断的情况。手动修复这些同步错误通常需要耗费时间和精力，并且对于不熟悉MySQL复制的人来说比较困难。pt-slave-repair是对原有pt-slave-restart工具

MySQL

解析json

版本号

原创 2024-08-13 10:37:07 147 阅读 1收藏

reverse_sql 新增支持字段是json或text类型binlog解析

reverse_sql 工具介绍reverse_sql 是一个用于解析和转换 MySQL 二进制日志（binlog）的工具。它可以将二进制日志文件中记录的数据库更改操作（如插入、更新、删除）转换为反向的 SQL 语句，以便进行数据恢复。其运行模式需二进制日志设置为 ROW 格式。reverse_sql工具版本号: 2.1.2，更新日期：2024-08-09 - 增加表字段是json或text类型的

二进制日志

sql

字段

原创 2024-08-09 20:55:59 401 阅读 1收藏

利用InnoDB Memcached插件，大幅提升MySQL查询性能

利用InnoDB Memcached插件，大幅提升MySQL查询性能MySQL自带有强大的Memcached插件，能够将InnoDB表中的数据直接映射到内存中，实现高性能的键值对存储。这意味着，我们可以像操作传统Memcached一样，通过简单的key来快速获取数据，而无需经过复杂的SQL解析过程。关键优势：性能大幅提升: 直接访问内存中的数据，显著加快查询速度。持久化支持: 数据不仅缓存在内存中

mysql

数据

memcached

原创精选 2024-08-07 09:38:52 418 阅读 1收藏

用 MySQL 实现 JSON 格式的数据存储

在绝大多数业务场景中，分布式数据库并非必需。事实上，约80%的应用程序都可以在单机环境下高效运行。对于绝大多数企业而言，数据库的数据量通常不会达到 TB 级别。在现代应用开发中，json 已成为数据交换和存储的常见格式。尽管 MongoDB 因其天然支持 json 而备受推崇，但 MySQL 也提供了强大的 json 数据类型支持，能够高效地处理 json 数据。在本指南中，我们将探讨如何使用My

JSON

json

mysql

原创精选 2024-08-05 14:36:53 710 阅读

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。接下来，我通过一个案例来演示这一点。https://dev.mysql.com/doc/refman/8.0/en/create-table-check-constraints.html我们创建一个名为 scores 的表，表中的 CHECK 约束确保 score 字段的值不能为 0。如果尝试插入值为 0 的记录，MySQL 将会抛

MySQL

SQL

mysql

原创 2024-08-02 14:33:13 178 阅读

ProxySQL 设置拦截危险SQL

操作 MySQL 数据库是十分危险的，生产环境，经常会有人因手滑把数据误改或者误删，那么如何避免？我的规则是：delete from，这种SQL禁止执行delete from...where 1=1，这种SQL禁止执行update ... set ...，这种SQL禁止执行update ... set ...where 1=1，这种SQL禁止执行实施访问ProxySQL的6032管理端口mysql

mysql

SQL

误删

原创 2024-08-01 17:09:07 710 阅读

用 ProxySQL 实现 MySQL 的读写分离

是的，这个世界80%的业务都不需要分布式数据库，单机MySQL加一个读写分离足矣。今天我带你用 ProxySQL 实现 MySQL 的读写分离。功能：将 "select ... for update" 语句和增删改（insert/update/delete）语句发送到主库。将 select 只读查询语句发送到从库。如果从库的复制延迟超过10秒，ProxySQL会将查询路由到其他可用的从库，如果从库

mysql

服务器

读写分离

原创精选 2024-07-30 16:20:51 736 阅读 1点赞 1收藏

借助ProxySQL来解决MySQL 主从复制无法过滤binlog event事件这一缺陷

sql

mysql

MySQL

原创精选 2024-07-25 16:22:55 381 阅读

借助 dbsake 和 ibd2sql 恢复宕机起不来的MySQL 5.7数据库

遇到MySQL数据丢失的窘境?想象一下这个场景: MySQL没有备份 MySQL是单点部署 MySQL突然宕机无法启动如何恢复 MySQL 5.7 的数据 - 不用离职的救命方案对于 MySQL 5.7 的数据恢复,我们可以借助 dbsake 和 ibd2sql 这两个强大的工具来完成。这个方法不仅可以恢复表结构,还能恢

MySQL

sql

表结构

原创 2024-07-22 10:39:36 397 阅读

MySQL离线ibd数据恢复工具 - ibd2sql

遇到MySQL数据丢失的窘境?想象一下这个场景:MySQL没有备份MySQL是单点部署MySQL突然宕机无法启动面对业务数据恢复的压力,是不是感觉天要塌了?别急着递交辞呈!ibd2sql工具可能是您的救命稻草。这是一款能将离线ibd文件转换为SQL语句的神器,可以帮助恢复宝贵的数据。让我们直接看看如何使用:安装wget https://github.com/ddcw/ibd2sql/archive

MySQL

sql

mysql

原创 2024-07-20 22:56:18 1370 阅读

MongoDB 文档被delete后，如何回收磁盘空间？

在回答这个问题之前，先了解一下 MySQL InnoDB 存储引擎是如何回收磁盘空间的。假设有一张表包含 1000 万条记录，删除其中的 800 万条记录，此时 InnoDB 的磁盘空间不会自动释放。要回收磁盘空间，需要执行以下命令：ALTER TABLE tableName ENGINE=InnoDB;MongoDB 的 WiredTiger 存储引擎也有类似的行为。要回收磁盘空间，可以执行以下

存储引擎

副本集

mongodb

原创 2024-07-18 15:11:14 1131 阅读

有手就可以玩，MariaDB轻松实现分库分表，让你的代码一行不改，就这么简单

如果你不想学习除了MySQL家族之外的数据库技术，并且也想轻松拥有分片技术，那你不妨看看MariaDB Spider存储引擎。今天我给你演示一下MariaDB Spider分片技术，它类似一个中间件，你可以把它比作为MyCAT，它可以让你的应用程序一行代码不改，即可轻松实现分库分表。具体的实施步骤，我给你说一下，真的非常简单，有手就可以玩。第一步，配置数据节点，我把命令贴在这里了，你直接复制粘贴即

MySQL

数据库

mysql

原创 2024-07-17 11:16:28 479 阅读

MySQL 8.0.38/8.4/9.0 超过1万张表触发BUG，系统直接crash

MySQL 8.0.38/8.4.1/9.0.0 超过1万张表触发BUG，系统直接crash下面是测试用例。shell脚本（批量创建1万张表）1w_bug.sh#!/bin/bash # MySQL connection details MYSQL_HOST="127.0.0.1" MYSQL_PORT="3306" MYSQL_USER="admin" MYSQL_PASSWORD="1234

mysql

MySQL

bash

原创 2024-07-12 09:05:12 751 阅读

一键快速迁移MySQL至TiDB，无需学习，直接复制粘贴

传统TiDB数据恢复流程TiDB的传统数据恢复过程通常包括两个主要步骤：使用Dumpling工具将MySQL数据导出到本地使用Lightning工具将本地数据导入TiDB这个过程需要熟悉TiDB的操作文档，较为繁琐。Mydumper：简化的数据迁移解决方案Mydumper采用更先进的Stream流式管道技术，能够通过一条命令实现备份和恢复，显著加快了恢复速度。它可以：直接替换TiDB Dumpli

MySQL

数据迁移

数据库

原创 2024-07-10 11:15:23 448 阅读

使用docker-slim为你的docker镜像瘦身

当谈到技术和资源管理时，确实并非所有事物越大越好，这点尤其在 Docker 镜像的管理上体现得淋漓尽致。随着镜像大小的增加，云存储和运维成本也随之增加。因此，有效地减小 Docker 镜像的尺寸对于降低成本和提高效率至关重要。举例来说，以hcymysql/mysql_slowquery:2024-07-04镜像为例，原始文件大小达到3.53GB。在这种情况下，使用 Docker-slim 工具可以

Docker

HTTP

服务器

原创精选 2024-07-09 16:27:51 552 阅读

SlowQuery 图形化显示MySQL 慢日志工具集成sqlai_helper（支持SQL改写，合并LLM模型接口）

SlowQuery 图形化显示MySQL 慢日志工具https://github.com/hcymysql/slowquery2024年7月4日更新：集成sqlai_helper（支持SQL改写，合并LLM模型接口）思想：把MySQL的慢日志集中到平台里展示，调用sqlai_helper工具分析里面的慢SQL，然后自动给出索引优化建议，并给出SQL改写建议，解放双手，释放人力成本，实现18点下班。

mysql

MySQL

推送

原创 2024-07-06 14:09:00 292 阅读

欢迎

首页
1
2
3
4
5
6
7
8
共332条记录

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MySQL 脱敏函数使用

在 MySQL InnoDB 中，允许开发人员在 MySQL 事务中手动控制锁 - 称之为“用户级锁”。

利用MySQL FIELD函数，按照你的意愿去做排序。

MongoDB 审计功能：增强安全性与合规性

实时监控MongoDB运行状态，就像你在MySQL里，执行show processlist一样

通过MariaDB MaxScale 实现一份数据同时写入 MongoDB 和 MySQL，建立双写机制。

mongosync 工具可以在两个集群之间持续同步数据

MySQL 8.0 新增 JSON_TABLE 函数的使用

MySQL 允许你在 JSON 数据上创建索引

MySQL 8.0 使用 ALGORITHM=INSTANT算法，即时添加或删除列，有64次数限制

用MySQL自身函数实现 - 随机盐加密，解密，脱敏。

ProxySQL 如何设置 MySQL 从库的故障转移功能？

ProxyWeb 是 ProxySQL 的图形可视化平台

Readyset 是 MySQL 轻量级缓存解决方案

pt-slave-repair 工具版本号: 1.0.8，更新日期：2024-08-13 - 支持解析json

reverse_sql 新增支持字段是json或text类型binlog解析

利用InnoDB Memcached插件，大幅提升MySQL查询性能

用 MySQL 实现 JSON 格式的数据存储

MySQL 从 8.0.16 版本开始支持 CHECK 约束功能。

ProxySQL 设置拦截危险SQL

用 ProxySQL 实现 MySQL 的读写分离

借助ProxySQL来解决MySQL 主从复制无法过滤binlog event事件这一缺陷

借助 dbsake 和 ibd2sql 恢复宕机起不来的MySQL 5.7数据库

MySQL离线ibd数据恢复工具 - ibd2sql

MongoDB 文档被delete后，如何回收磁盘空间？

有手就可以玩，MariaDB轻松实现分库分表，让你的代码一行不改，就这么简单

MySQL 8.0.38/8.4/9.0 超过1万张表触发BUG，系统直接crash

一键快速迁移MySQL至TiDB，无需学习，直接复制粘贴

使用docker-slim为你的docker镜像瘦身

SlowQuery 图形化显示MySQL 慢日志工具集成sqlai_helper（支持SQL改写，合并LLM模型接口）

欢迎