hcymysql的博客_python,Mysql,自动化运维,MongoDB,redis,MySQL管理,MySQL优化,日常工作(1)

按发布时间
按阅读量
2023年 41篇

全部332篇
2025年10篇 03月2篇 02月3篇 01月5篇 2024年87篇 12月4篇 11月5篇 10月5篇 09月12篇 08月11篇 07月11篇 06月9篇 05月2篇 04月4篇 03月1篇 02月12篇 01月11篇 2023年41篇 12月17篇 11月6篇 10月5篇 09月2篇 08月2篇 07月1篇 06月3篇 05月3篇 02月1篇 01月1篇 2022年14篇 12月2篇 07月1篇 06月5篇 05月2篇 04月1篇 02月2篇 01月1篇 2021年7篇 12月2篇 11月2篇 10月1篇 07月1篇 01月1篇 2020年13篇 12月1篇 10月1篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 03月1篇 01月1篇 2019年17篇 12月6篇 11月6篇 10月1篇 09月1篇 08月1篇 04月1篇 03月1篇 2018年15篇 12月1篇 11月1篇 10月3篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 01月1篇 2017年9篇 12月1篇 11月1篇 07月1篇 05月2篇 04月1篇 01月3篇 2016年9篇 12月1篇 11月2篇 10月1篇 08月1篇 06月1篇 03月2篇 02月1篇 2015年20篇 10月6篇 09月3篇 08月1篇 07月1篇 06月2篇 04月1篇 03月3篇 02月1篇 01月2篇 2014年61篇 11月8篇 10月4篇 09月5篇 07月3篇 06月5篇 05月8篇 04月6篇 03月8篇 02月11篇 01月3篇 2013年9篇 12月3篇 11月4篇 05月1篇 04月1篇 2012年20篇 12月1篇 11月3篇 10月4篇 09月3篇 08月2篇 07月1篇 06月6篇
推荐/精选
全部

全部原创转载翻译

MariaDB VS MySQL 2023年技术总结

专业评测报告来源于Percona，这里摘要关键部分展示二者区别。https://www.percona.com/blog/mysql-vs-mariadb-reality-check/MariaDB vs. MySQL vs Percona Server for MySQL：一般比较MariaDB、MySQL 和 Percona Server for MySQL 都是非常流行的关系数据库管理系统。

MySQL

Server

Enterprise

原创 2023-12-29 15:19:28 885 阅读

一招让order by id索引失效！

测试用例CREATE TABLE `sbtest1` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `k` int(10) unsigned NOT NULL DEFAULT '0', `c` char(120) NOT NULL DEFAULT '', `pad` char(60) NOT NULL DEFAULT '',

主键

测试用例

MySQL

原创 2023-12-25 14:09:15 941 阅读

MariaDB Columnstore 数仓OLAP使用注意事项

MariaDB Columnstore引擎使用注意事项一、字段属性限制1、varchar最大80002、不支持bit类型3、不支持Reserved keywords保留关键字user、comment、match、key、update、status作为表名、字段名或用户定义的变量、函数或存储过程的名称。4、不支持zerofill5、不支持enum枚举类型6、comment不能携带''引号create

字段

主键

关联查询

原创 2023-12-21 10:44:44 454 阅读

MariaDB Columnstore 数仓OLAP支持一键部署

MariaDB ColumnStore利用分布式列式存储和大规模并行处理（MPP）共享无架构扩展了MariaDB企业服务器，将其转变为独立或分布式数据仓库，用于复杂SQL查询和高级分析，而无需创建任何索引。为了简化安装过程，让用户享受更好的产品体验，MariaDB提供yum源方式部署，用户只需几条命令，即可轻松部署OLAP MPP数据仓库环境。shell> wget https:/

数据仓库

安装过程

企业服务

原创 2023-12-20 11:15:04 889 阅读

面试题：切库后MySQL为什么会变慢？

请听题：“MySQL是一主两从架构，现在接到IAAS部门反馈数据盘坏了一块，计划凌晨去机房更换硬盘，DBA说保险起见，还是跟业务对接一下，切数据库做一次割接更为稳妥。JAVA架构师采纳了DBA的意见，问什么时候切库割接，DBA说晚上22点吧，在家弄就行。于是晚上22点，DBA跟JAVA师说，我现在要切库，大约10几秒完事。结果很顺利，VIP漂移成功DBA查看应用连接已经正常在新的主库上查询。但仅仅

JAVA

数据

数据库

原创 2023-12-19 10:03:26 730 阅读

rank无法适配MySQL 8.0，准备迁移请留步！

rank在MySQL 8.0里是作为保留关键字，固业务要更改SQL才能适配！！！具体请看下面的截图：这是MySQL 5.7，该SQL顺利执行：这是MySQL 8.0，直接报错！

MySQL

SQL

原创 2023-12-16 21:51:11 768 阅读 1评论

mysql_repl - 轻便型的MySQL binlog replication tool

mysql_repl - 轻便型的MySQL binlog replication toolhttps://github.com/hcymysql/mysql_repl/使用场景：从MySQL8.0实时解析binlog并复制到MariaDB，适用于将MySQL8.0迁移至MariaDB不熟悉MySQL主从复制搭建的新手使用原理：把自己伪装成slave，从源master解析binlog并入库targ

mysql

MySQL

断点续传

原创 2023-12-14 11:23:55 159 阅读

一款免费的在线 SQL 数据库测试环境

在线的免费 SQL 运行环境，也就是在线数据库。SQL Onlinehttps://sqliteonline.com/可以帮助我们快速运行一些 SQL 语句的测试或者验证，关键不需要自己安装数据库。SQL Online 提供了 MariaDB（MySQL衍生版，SQL语法均兼容）、PostgreSQL、SQLite 以及 SQL Server 数据库环境“File”按钮提供了本地保存和打开功能；“

SQL

数据库

Server

原创 2023-12-14 09:24:15 2323 阅读

神器！MongoDB语法在线生成器

这个免费工具可以将用于 MySQL、Oracle、Postgresql 或 SQL 服务器的 SQL 查询转换为 MongoDB - NoSQL 查询格式。对于习惯了结构化数据库查询并刚开始学习 MongoDB 的人来说，这是一个非常方便的工具。还提供了浏览和加载输入 SQL 查询以及下载输出 MongoDB 查询的选项。工具地址：https://www.site24x7.com/tools/sq

SQL

sql

结构化

原创 2023-12-12 09:16:06 895 阅读

Redis的IO多路复用原理 - 生活案例解释

仓库管理员就像一个服务器，负责接收和处理来自多个客户端的请求。快递员就像一个线程，负责处理一个客户端的请求。仓库管理员会根据客户端的送达地点将快递标记好，然后依次放在一个地方。快递员会依次去取快递，一次拿一个，送好了就回来拿下一个快递。这种方式可以实现单个线程（一个快递员）同时处理多个客户端（多个快递）的请求。具体的解释如下：仓库管理员按送达地点标注好快递，就像服务器将客户端的请求分配到不同的队列

客户端

服务器

上下文切换

原创 2023-12-11 23:00:02 222 阅读

一个诡异的SQL返回结果，可作为面试题

复现：CREATE TABLE `t1` ( `user_id` int DEFAULT NULL, `name` varchar(10) DEFAULT NULL, `address` varchar(10) DEFAULT NULL, KEY `idx_userid` (`user_id`) ) ENGINE=InnoDBmysql> select * from t1;

mysql

数据

MySQL

原创 2023-12-10 01:03:16 320 阅读

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL集群从5.7升级至8.0的故事官方文献：https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/全文译：15 年前，GitHub 从一个带有单一 MySQL 数据库的 Ruby on Rails 应用程序起步。从那时起，GitHub 不断发展 MyS

MySQL

回滚

数据

原创 2023-12-09 21:30:09 161 阅读

100G大表Alter更改表结构技术方案探讨

JAVA研发需求：需要对A表的XXX字段扩容至varchar(500)目前的现状：线上A表有100G+的数据，如果直接modify XXX varchar(500)，会锁全表，即使用pt-osc工具凌晨搞，预估一宿加不完，并且从库会出现大面积延迟，读取的数据将不准确。https://dev.mysql.com/doc/refman/8.0/en/innodb-online-ddl-operatio

数据

JAVA

mysql

原创 2023-12-06 21:08:26 454 阅读

一招破“Too many connections”，让MySQL死灰复燃

一招破“ERROR 1040 (HY000): Too many connections”shell> mysql -S /tmp/mysql_mysql57_1.sock ERROR 1040 (HY000): Too many connections解决方案1、得到mysqld进程号shell> ps aux | grep /tmp/mysql_mysql57_1.sock | g

mysql

MySQL

解决方案

原创 2023-12-04 14:15:00 274 阅读

PERCONA 8.0 新增kill_idle_transaction参数

PERCONA 8.0 新增kill_idle_transaction参数，其作用是：自动KILL掉未提交的空闲事务。注：MYSQL 8.0.35并不支持。参加官方文档：https://docs.percona.com/percona-server/8.0/kill-idle-trx.html场景：update t1 set cid=200 where id = 20;这条SQL长时间未提交，那么

html

高并发

SQL

原创 2023-12-01 16:55:03 249 阅读

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper(https://github.com/hcymysql/sql_helper) ※ThinkSQL地址： https://pypi.org/project/think-sql/Project description ThinkSQL 类似 ThinkPHP 的数据库引擎 Install pip inst

sql

数据库引擎

github

原创 2023-12-01 10:22:19 144 阅读

TenDB Cluster，一个基于MariaDB Spider的分布式数据库解决方案

官方视频分享：https://mariadb.org/cloud-minifest2021/tendb-cluster/会议摘要Spider存储引擎和我们的TenDB Cluster解决方案简介1.1 谈谈MariaDB和Spider，简单介绍一下Spider的特点。1.2 介绍我们的TenDB集群解决方案（基于TSpider——腾讯游戏的Spider SE分支）。内容包括TenDB Cluste

ide

解决方案

mysql

原创 2023-11-28 08:58:25 360 阅读

php访问MySQL 8.0 utf8mb4报错的解决方案

由于MySQL 8.0默认字符集是 utf8mb4，PHP访问会报错，报错信息如下所示：PHP Warning: mysqli_connect(): Server sent charset (255) unknown to the client. Please, report to the developers in /root/php_utf8mb4/conn.php on line

php

mysql

Server

原创 2023-11-26 22:56:32 1387 阅读

MySQL 8.0.35目前仍不支持ALTER TABLE ...NOWAIT功能

首先明确一个问题，Alter更改表结构，会加什么锁？答：MDL（元数据表锁），就如同我们打开一个EXCEL文档时，用户A正在翻阅，此时用户B要增加一列。那么用户B要等待用户A翻阅完，才可以增加，否则用户A查询的数据就会不一致，不符合ACID事务四大特性。案例会话一会话二会话三begin;select sleep(1800),id from sbtest1 where id=1;注：休眠1800秒

mysql

sql

元数据

原创 2023-11-23 10:58:25 276 阅读

MySQL 8.0 目前仍旧没有解决timestamp时间戳溢出的问题

在MySQL中，TIMESTAMP列的默认范围是从'1970-01-01 00:00:01'到'2038-01-19 03:14:07'。如果插入的时间值超出了该范围，MySQL会将其视为无效值，并将其设置为'0000-00-00 00:00:00'。在MySQL 8.0.35最新版本中，timestamp时间戳溢出的问题目前仍旧没有解决。如下图所示：为了解决这个问题，只能更改表结构，将updat

MySQL

新版本

时间戳

原创 2023-11-16 14:22:58 540 阅读

redis_find_bigkey工具 - 自定义阀值查找Redis Big Keys

redis_find_bigkey工具 - 自定义阀值查找Redis Big Keyshttps://github.com/hcymysql/redis_find_bigkeyRedis大key是指在Redis中存储的Value值非常大的键，当一个命令需要处理大的键值时，Redis将会花费更多的时间来执行这个命令，这会导致其他客户端发起的命令需要等待更长的时间才能得到响应。在高并发的场景下，这可能

Redis

redis

原创 2023-11-13 14:26:03 251 阅读

mysql_sniffer 是一个基于 MySQL 协议的抓包工具，用来实时抓取 MySQL 服务端的请求，并格式化输出，输出内容包括访问时间、来源 IP、执行的SQL语句。

mysql_sniffer 是一个基于 MySQL 协议的抓包工具，用来实时抓取 MySQL 服务端的请求，并格式化输出，输出内容包括访问时间、来源 IP、执行的SQL语句。在进行MySQL 8.0升级时，了解新版本对SQL语法的改变和新增的功能是非常重要的。通过使用mysql_sniffer，DBA可以在升级之前对现有的SQL语句进行抓取和分析，以确保在新版本中能够正常运行。有一些已知SQL语法

mysql

MySQL

SQL

原创 2023-10-25 15:04:14 287 阅读

MySQL 5.7生命周期终结的技术探讨

MySQL 5.7 将于 2023 年 10月 31日终结生命周期。终结意味着自2023年10月31日起，MySQL官方将不再提供对MySQL 5.7版本的技术支持和更新。本文将从技术角度和业务层面出发，来分析升级数据库或迁移到其他数据库系统的必要性和迫切性。我们将探讨为什么进行数据库升级或迁移是一个重要的决策，并从技术和业务两个方面来论述。

数据库

MySQL

运维经验

原创 2023-10-18 21:37:19 698 阅读

MongoDB 4.2 需关闭FlowControl流控机制

MongoDB 4.2 版本引入了流量控制特性，用于保持副本集多数提交延迟不超过指定的最大值，从而确保数据的一致性和可靠性。如果复制延迟达到"flowControlTargetLagSeconds" : 10（秒），流量控制机制就会开始限制主节点上的写入操作。db.adminCommand( { getParameter : 1, "flowControlTargetLagSeconds" : 1

流量控制

mongodb

原创 2023-10-13 14:25:41 702 阅读

MySQL命令行监控工具 - mysqlstat 介绍

mysqlstat 是一个命令行工具，功能如下：实时监控mysql服务器的QPS、TPS、网络带宽指标查看执行次数最频繁的前N条SQL语句查看访问次数最频繁的前N张表文件ibd查看当前锁阻塞的SQL查看死锁信息查看重复或冗余的索引查看应用端IP连接数总和统计库里每个表的大小MySQL命令行监控工具 - mysqlstat https://github.com/hcymysql/mysqlstat

mysql

SQL

原创 2023-10-10 21:51:52 356 阅读 1评论

MySQL 8.0 MGR（组复制）高可用VIP故障转移脚本

MySQL 8.0 MGR（组复制）高可用VIP故障转移脚本简介：MGR（组复制）官方推荐用MySQL router中间件去做MGR高可用故障转移，但其多过了一层网络，性能会下降，并且需要额外维护一套中间件，运维成本过高，于是写了一个类似MHA的master_ip_failover脚本，实现VIP切换。1）脚本会自动设置当前Primary和备选Primary参数group_replication_

php

MySQL

配置文件

mgr

组复制

原创 2023-10-08 10:16:42 527 阅读 1收藏

实现MySQL AES_ENCRYPT函数带盐 - 对字段值做加密处理

在MySQL中，AES_ENCRYPT函数本身不包含盐的功能。盐（salt）是一个随机生成的值，用于增加加密的复杂性和安全性。在使用盐时，需要确保每次加密都使用不同的盐值，并将盐值与加密后的数据一起存储。解密时，需要将盐值与加密后的数据一起使用，以正确还原原始数据。使用带盐的AES_ENCRYPT函数，加密具体步骤如下：生成一个随机的盐值。盐值应该足够长、足够复杂，以增加破解的难度。将盐值和密钥连

数据

字符串

加密结果

原创 2023-09-26 13:50:18 629 阅读

Slowquery图形化显示MySQL慢日志平台【2023年9月13日更新】

slowquery2023年9月13日更新: 用自研的sql_helper替换掉soar，无需部署，直接拉取docker pull slowquery即可。服务端部署：拉取镜像shell> docker pull docker.io/hcymysql/slowquery:2023-09-13启动shell> docker run -itd -e "TERM=xterm-256color

docker

mysql

服务端

原创 2023-09-14 10:37:39 212 阅读

欢迎

首页
1
2
共41条记录

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MariaDB VS MySQL 2023年技术总结

一招让order by id索引失效！

MariaDB Columnstore 数仓OLAP使用注意事项

MariaDB Columnstore 数仓OLAP支持一键部署

面试题：切库后MySQL为什么会变慢？

rank无法适配MySQL 8.0，准备迁移请留步！

mysql_repl - 轻便型的MySQL binlog replication tool

一款免费的在线 SQL 数据库测试环境

神器！MongoDB语法在线生成器

Redis的IO多路复用原理 - 生活案例解释

一个诡异的SQL返回结果，可作为面试题

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

100G大表Alter更改表结构技术方案探讨

一招破“Too many connections”，让MySQL死灰复燃

推荐一个好用的MySQL命令行工具mycli

PERCONA 8.0 新增kill_idle_transaction参数

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper

TenDB Cluster，一个基于MariaDB Spider的分布式数据库解决方案

php访问MySQL 8.0 utf8mb4报错的解决方案

MySQL 8.0.35目前仍不支持ALTER TABLE ...NOWAIT功能

MySQL 8.0 目前仍旧没有解决timestamp时间戳溢出的问题

redis_find_bigkey工具 - 自定义阀值查找Redis Big Keys

推荐一款轻便型MySQL数据库管理工具Adminer

mysql_sniffer 是一个基于 MySQL 协议的抓包工具，用来实时抓取 MySQL 服务端的请求，并格式化输出，输出内容包括访问时间、来源 IP、执行的SQL语句。

MySQL 5.7生命周期终结的技术探讨

MongoDB 4.2 需关闭FlowControl流控机制

MySQL命令行监控工具 - mysqlstat 介绍

MySQL 8.0 MGR（组复制）高可用VIP故障转移脚本

实现MySQL AES_ENCRYPT函数带盐 - 对字段值做加密处理

Slowquery图形化显示MySQL慢日志平台【2023年9月13日更新】

欢迎