hcymysql的博客_python,Mysql,自动化运维,MongoDB,redis,MySQL管理,MySQL优化,日常工作原创(4)

按发布时间
按阅读量
时间轴

全部332篇
2025年10篇 03月2篇 02月3篇 01月5篇 2024年87篇 12月4篇 11月5篇 10月5篇 09月12篇 08月11篇 07月11篇 06月9篇 05月2篇 04月4篇 03月1篇 02月12篇 01月11篇 2023年41篇 12月17篇 11月6篇 10月5篇 09月2篇 08月2篇 07月1篇 06月3篇 05月3篇 02月1篇 01月1篇 2022年14篇 12月2篇 07月1篇 06月5篇 05月2篇 04月1篇 02月2篇 01月1篇 2021年7篇 12月2篇 11月2篇 10月1篇 07月1篇 01月1篇 2020年13篇 12月1篇 10月1篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 03月1篇 01月1篇 2019年17篇 12月6篇 11月6篇 10月1篇 09月1篇 08月1篇 04月1篇 03月1篇 2018年15篇 12月1篇 11月1篇 10月3篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 01月1篇 2017年9篇 12月1篇 11月1篇 07月1篇 05月2篇 04月1篇 01月3篇 2016年9篇 12月1篇 11月2篇 10月1篇 08月1篇 06月1篇 03月2篇 02月1篇 2015年20篇 10月6篇 09月3篇 08月1篇 07月1篇 06月2篇 04月1篇 03月3篇 02月1篇 01月2篇 2014年61篇 11月8篇 10月4篇 09月5篇 07月3篇 06月5篇 05月8篇 04月6篇 03月8篇 02月11篇 01月3篇 2013年9篇 12月3篇 11月4篇 05月1篇 04月1篇 2012年20篇 12月1篇 11月3篇 10月4篇 09月3篇 08月2篇 07月1篇 06月6篇
推荐/精选
原创

全部原创转载翻译

MySQL导入数据小技巧：在不影响业务的前提下，如何平稳迁移数据？

MySQL导入数据小技巧：在不影响业务的前提下，如何平稳迁移数据？生产案例：产品经理要求把B库里的表迁移到A库里。问：在不影响业务的前提下，如何平稳迁移数据？答：可以做限速，以每秒1MB的速度导入数据，这样CPU和磁盘IO不受影响。shell> pv -a -q -t -L 1m test1.sql | mysql -S /tmp/mysql.sock -p123456 test

mysql

导入数据

数据

原创 2024-01-28 22:20:34 314 阅读

reverse_sql误操作恢复工具 - 增加json格式支持

reverse_sql 是一个用于解析和转换 MySQL 二进制日志（binlog）的工具。它可以将二进制日志文件中记录的数据库更改操作（如插入、更新、删除）转换为反向的 SQL 语句，以便进行数据恢复。其运行模式需二进制日志设置为 ROW 格式。reverse_sql工具版本号: 2.1.1，更新日期：2024-01-27 - 增加json格式支持MySQL5.7版本用 https://gith

sql

mysql

二进制日志

原创 2024-01-27 23:45:58 439 阅读

【解答】面试题：如何快速解决跨库join表关联？

面试题：如何快速解决跨库join表关联？有一天产品经理提了一个需求，要关联查询A库的xxx表和B库的xxx表(跨库join)，做实时分析(查询的表不固定，后期业务还会调整)。Java研发更改代码实现比较困难，大数据团队反馈可以，但不能保证实时性，会有30分钟左右的数据延迟。产品经理说我这个需求很急，30分钟数据延迟业务不能接受。那么问题来了，如何解决? 明天就上线。【解决方案】第一种、利用MySQ

ide

mysql

MySQL

原创 2024-01-26 11:17:22 724 阅读 1收藏

担心MySQL binlog文件增长速度过快而撑爆磁盘空间？

担心MySQL binlog文件增长速度过快而撑爆磁盘空间？那么你需要了解一下Percona 8.0 binlog_space_limit参数（限制二进制日志文件使用的磁盘空间）该变量对所有二进制日志的总大小（以字节为单位）设置了上限。当达到限制时，最旧的二进制日志将被清除，直到总大小低于限制或仅保留活动日志。

二进制日志

默认值

MySQL

原创 2024-01-26 09:32:35 663 阅读

【Sqlboys的福音】录入你的表结构，让Vanna.AI为你编写业务SQL

【Sqlboys的福音】录入你的表结构，让Vanna.AI为你编写业务SQLsqlai.pyimport pandas as pd import mysql.connector from vanna.remote import VannaDefault vn = VannaDefault(model='yourModel', api_key='xxxx') conn_details = { '

sql

表结构

SQL

原创 2024-01-24 23:41:19 693 阅读

在Haproxy负载均衡模式下，P e rcona 8.0 可以得到后端Java/PHP应用程序的真实IP。

在Haproxy负载均衡模式下，P e rcona8.0可以得到后端Java/PHP应用程序的真实IP。架构：Java -> Haproxy -> MySQL Slave（对从库做负载均衡读）在MySQL 8.0里，执行show processlist或者查看慢日志slow.log，只能查看到Haproxy的代理IP，无法得到真实应用的IP地址。这对于排查线上慢SQL，给研发带来了难度

MySQL

重启

原创 2024-01-19 08:58:45 218 阅读

修改MySQL 8.0的版本信息和登录信息，改成你自己的。

修改MySQL 8.0的版本信息和登录信息，改成你自己的。编译环境准备# yum install make -y# yum -y install centos-release-scl# yum -y install devtoolset-9-gcc devtoolset-9-gcc-c++ devtoolset-9-binutils# scl enable devtoolset-9 bash# e

mysql

vim

c++

原创 2024-01-17 15:09:29 503 阅读

差异摘要：MySQL 与MariaDB

MariaDB 和 MySQL 之间有何区别？MySQL 和 MariaDB 都是开源数据库技术。您可以使用它们以包含行和列的表格格式存储数据。MySQL 是最广泛采用的开源数据库。它是许多热门网站、应用程序和商业产品的主要关系数据库。MariaDB 是 MySQL 的修改版本。在 MySQL 被 Oracle 公司收购后，出于许可和分发方面的问题，MySQL 的原始开发团队制作了 MariaDB

MySQL

JSON

数据类型

原创 2024-01-12 11:06:42 918 阅读

mysql_native_password 身份验证插件在未来版本中移除

自 MySQL 8.0.34 起，mysql_native_password 身份验证插件已被弃用，并可能在 MySQL 的未来版本中移除。移除意味着：Java jdbc配置文件以及后端大数据的账号密码，必须更改为caching_sha2_password认证模式，否则无法连接MySQL数据库。如果业务系统今后升级MySQL 8.0，这块需要加以适配。如果业务程序不方便更改认证模式，可以选择Mar

MySQL

认证模式

mysql

原创 2024-01-10 10:43:59 1464 阅读

2038年MySQL5.7和MariaDB 10.6自动终止服务进程。MySQL 8.0.31未受影响。

2038年MySQL5.7和MariaDB 10.6自动终止服务进程。MySQL 8.0.31未受影响。14年内，必须升级MySQL5.7数据库，重要的事情说三遍。见下面截图[Warning] Current time has got past year 2038. Validating current time with 5 iterations before initiating the no

MySQL

数据库

服务进程

原创 2024-01-04 23:06:08 769 阅读

MariaDB VS MySQL 2023年技术总结

专业评测报告来源于Percona，这里摘要关键部分展示二者区别。https://www.percona.com/blog/mysql-vs-mariadb-reality-check/MariaDB vs. MySQL vs Percona Server for MySQL：一般比较MariaDB、MySQL 和 Percona Server for MySQL 都是非常流行的关系数据库管理系统。

MySQL

Server

Enterprise

原创 2023-12-29 15:19:28 884 阅读

一招让order by id索引失效！

测试用例CREATE TABLE `sbtest1` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `k` int(10) unsigned NOT NULL DEFAULT '0', `c` char(120) NOT NULL DEFAULT '', `pad` char(60) NOT NULL DEFAULT '',

主键

测试用例

MySQL

原创 2023-12-25 14:09:15 941 阅读

MariaDB Columnstore 数仓OLAP使用注意事项

MariaDB Columnstore引擎使用注意事项一、字段属性限制1、varchar最大80002、不支持bit类型3、不支持Reserved keywords保留关键字user、comment、match、key、update、status作为表名、字段名或用户定义的变量、函数或存储过程的名称。4、不支持zerofill5、不支持enum枚举类型6、comment不能携带''引号create

字段

主键

关联查询

原创 2023-12-21 10:44:44 452 阅读

MariaDB Columnstore 数仓OLAP支持一键部署

MariaDB ColumnStore利用分布式列式存储和大规模并行处理（MPP）共享无架构扩展了MariaDB企业服务器，将其转变为独立或分布式数据仓库，用于复杂SQL查询和高级分析，而无需创建任何索引。为了简化安装过程，让用户享受更好的产品体验，MariaDB提供yum源方式部署，用户只需几条命令，即可轻松部署OLAP MPP数据仓库环境。shell> wget https:/

数据仓库

安装过程

企业服务

原创 2023-12-20 11:15:04 887 阅读

面试题：切库后MySQL为什么会变慢？

请听题：“MySQL是一主两从架构，现在接到IAAS部门反馈数据盘坏了一块，计划凌晨去机房更换硬盘，DBA说保险起见，还是跟业务对接一下，切数据库做一次割接更为稳妥。JAVA架构师采纳了DBA的意见，问什么时候切库割接，DBA说晚上22点吧，在家弄就行。于是晚上22点，DBA跟JAVA师说，我现在要切库，大约10几秒完事。结果很顺利，VIP漂移成功DBA查看应用连接已经正常在新的主库上查询。但仅仅

JAVA

数据

数据库

原创 2023-12-19 10:03:26 730 阅读

rank无法适配MySQL 8.0，准备迁移请留步！

rank在MySQL 8.0里是作为保留关键字，固业务要更改SQL才能适配！！！具体请看下面的截图：这是MySQL 5.7，该SQL顺利执行：这是MySQL 8.0，直接报错！

MySQL

SQL

原创 2023-12-16 21:51:11 768 阅读 1评论

mysql_repl - 轻便型的MySQL binlog replication tool

mysql_repl - 轻便型的MySQL binlog replication toolhttps://github.com/hcymysql/mysql_repl/使用场景：从MySQL8.0实时解析binlog并复制到MariaDB，适用于将MySQL8.0迁移至MariaDB不熟悉MySQL主从复制搭建的新手使用原理：把自己伪装成slave，从源master解析binlog并入库targ

mysql

MySQL

断点续传

原创 2023-12-14 11:23:55 159 阅读

一款免费的在线 SQL 数据库测试环境

在线的免费 SQL 运行环境，也就是在线数据库。SQL Onlinehttps://sqliteonline.com/可以帮助我们快速运行一些 SQL 语句的测试或者验证，关键不需要自己安装数据库。SQL Online 提供了 MariaDB（MySQL衍生版，SQL语法均兼容）、PostgreSQL、SQLite 以及 SQL Server 数据库环境“File”按钮提供了本地保存和打开功能；“

SQL

数据库

Server

原创 2023-12-14 09:24:15 2322 阅读

神器！MongoDB语法在线生成器

这个免费工具可以将用于 MySQL、Oracle、Postgresql 或 SQL 服务器的 SQL 查询转换为 MongoDB - NoSQL 查询格式。对于习惯了结构化数据库查询并刚开始学习 MongoDB 的人来说，这是一个非常方便的工具。还提供了浏览和加载输入 SQL 查询以及下载输出 MongoDB 查询的选项。工具地址：https://www.site24x7.com/tools/sq

SQL

sql

结构化

原创 2023-12-12 09:16:06 895 阅读

Redis的IO多路复用原理 - 生活案例解释

仓库管理员就像一个服务器，负责接收和处理来自多个客户端的请求。快递员就像一个线程，负责处理一个客户端的请求。仓库管理员会根据客户端的送达地点将快递标记好，然后依次放在一个地方。快递员会依次去取快递，一次拿一个，送好了就回来拿下一个快递。这种方式可以实现单个线程（一个快递员）同时处理多个客户端（多个快递）的请求。具体的解释如下：仓库管理员按送达地点标注好快递，就像服务器将客户端的请求分配到不同的队列

客户端

服务器

上下文切换

原创 2023-12-11 23:00:02 222 阅读

一个诡异的SQL返回结果，可作为面试题

复现：CREATE TABLE `t1` ( `user_id` int DEFAULT NULL, `name` varchar(10) DEFAULT NULL, `address` varchar(10) DEFAULT NULL, KEY `idx_userid` (`user_id`) ) ENGINE=InnoDBmysql> select * from t1;

mysql

数据

MySQL

原创 2023-12-10 01:03:16 320 阅读

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL集群从5.7升级至8.0的故事官方文献：https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/全文译：15 年前，GitHub 从一个带有单一 MySQL 数据库的 Ruby on Rails 应用程序起步。从那时起，GitHub 不断发展 MyS

MySQL

回滚

数据

原创 2023-12-09 21:30:09 159 阅读

100G大表Alter更改表结构技术方案探讨

JAVA研发需求：需要对A表的XXX字段扩容至varchar(500)目前的现状：线上A表有100G+的数据，如果直接modify XXX varchar(500)，会锁全表，即使用pt-osc工具凌晨搞，预估一宿加不完，并且从库会出现大面积延迟，读取的数据将不准确。https://dev.mysql.com/doc/refman/8.0/en/innodb-online-ddl-operatio

数据

JAVA

mysql

原创 2023-12-06 21:08:26 454 阅读

一招破“Too many connections”，让MySQL死灰复燃

一招破“ERROR 1040 (HY000): Too many connections”shell> mysql -S /tmp/mysql_mysql57_1.sock ERROR 1040 (HY000): Too many connections解决方案1、得到mysqld进程号shell> ps aux | grep /tmp/mysql_mysql57_1.sock | g

mysql

MySQL

解决方案

原创 2023-12-04 14:15:00 274 阅读

PERCONA 8.0 新增kill_idle_transaction参数

PERCONA 8.0 新增kill_idle_transaction参数，其作用是：自动KILL掉未提交的空闲事务。注：MYSQL 8.0.35并不支持。参加官方文档：https://docs.percona.com/percona-server/8.0/kill-idle-trx.html场景：update t1 set cid=200 where id = 20;这条SQL长时间未提交，那么

html

高并发

SQL

原创 2023-12-01 16:55:03 249 阅读

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper(https://github.com/hcymysql/sql_helper) ※ThinkSQL地址： https://pypi.org/project/think-sql/Project description ThinkSQL 类似 ThinkPHP 的数据库引擎 Install pip inst

sql

数据库引擎

github

原创 2023-12-01 10:22:19 142 阅读

TenDB Cluster，一个基于MariaDB Spider的分布式数据库解决方案

官方视频分享：https://mariadb.org/cloud-minifest2021/tendb-cluster/会议摘要Spider存储引擎和我们的TenDB Cluster解决方案简介1.1 谈谈MariaDB和Spider，简单介绍一下Spider的特点。1.2 介绍我们的TenDB集群解决方案（基于TSpider——腾讯游戏的Spider SE分支）。内容包括TenDB Cluste

ide

解决方案

mysql

原创 2023-11-28 08:58:25 359 阅读

php访问MySQL 8.0 utf8mb4报错的解决方案

由于MySQL 8.0默认字符集是 utf8mb4，PHP访问会报错，报错信息如下所示：PHP Warning: mysqli_connect(): Server sent charset (255) unknown to the client. Please, report to the developers in /root/php_utf8mb4/conn.php on line

php

mysql

Server

原创 2023-11-26 22:56:32 1387 阅读

MySQL 8.0.35目前仍不支持ALTER TABLE ...NOWAIT功能

首先明确一个问题，Alter更改表结构，会加什么锁？答：MDL（元数据表锁），就如同我们打开一个EXCEL文档时，用户A正在翻阅，此时用户B要增加一列。那么用户B要等待用户A翻阅完，才可以增加，否则用户A查询的数据就会不一致，不符合ACID事务四大特性。案例会话一会话二会话三begin;select sleep(1800),id from sbtest1 where id=1;注：休眠1800秒

mysql

sql

元数据

原创 2023-11-23 10:58:25 276 阅读

欢迎

首页
1
2
3
4
5
6
7
8
共311条记录

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MySQL导入数据小技巧：在不影响业务的前提下，如何平稳迁移数据？

reverse_sql误操作恢复工具 - 增加json格式支持

【解答】面试题：如何快速解决跨库join表关联？

担心MySQL binlog文件增长速度过快而撑爆磁盘空间？

【Sqlboys的福音】录入你的表结构，让Vanna.AI为你编写业务SQL

在Haproxy负载均衡模式下，P e rcona 8.0 可以得到后端Java/PHP应用程序的真实IP。

修改MySQL 8.0的版本信息和登录信息，改成你自己的。

差异摘要：MySQL 与MariaDB

mysql_native_password 身份验证插件在未来版本中移除

2038年MySQL5.7和MariaDB 10.6自动终止服务进程。MySQL 8.0.31未受影响。

MariaDB VS MySQL 2023年技术总结

一招让order by id索引失效！

MariaDB Columnstore 数仓OLAP使用注意事项

MariaDB Columnstore 数仓OLAP支持一键部署

面试题：切库后MySQL为什么会变慢？

rank无法适配MySQL 8.0，准备迁移请留步！

mysql_repl - 轻便型的MySQL binlog replication tool

一款免费的在线 SQL 数据库测试环境

神器！MongoDB语法在线生成器

Redis的IO多路复用原理 - 生活案例解释

一个诡异的SQL返回结果，可作为面试题

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事

100G大表Alter更改表结构技术方案探讨

一招破“Too many connections”，让MySQL死灰复燃

推荐一个好用的MySQL命令行工具mycli

PERCONA 8.0 新增kill_idle_transaction参数

★贡献：ThinkSQL 类似 ThinkPHP 的数据库引擎，集成sql_helper

TenDB Cluster，一个基于MariaDB Spider的分布式数据库解决方案

php访问MySQL 8.0 utf8mb4报错的解决方案

MySQL 8.0.35目前仍不支持ALTER TABLE ...NOWAIT功能

欢迎