hcymysql的博客_python,Mysql,自动化运维,MongoDB,redis,MySQL管理,MySQL优化,日常工作原创(8)

按发布时间
按阅读量
时间轴

全部332篇
2025年10篇 03月2篇 02月3篇 01月5篇 2024年87篇 12月4篇 11月5篇 10月5篇 09月12篇 08月11篇 07月11篇 06月9篇 05月2篇 04月4篇 03月1篇 02月12篇 01月11篇 2023年41篇 12月17篇 11月6篇 10月5篇 09月2篇 08月2篇 07月1篇 06月3篇 05月3篇 02月1篇 01月1篇 2022年14篇 12月2篇 07月1篇 06月5篇 05月2篇 04月1篇 02月2篇 01月1篇 2021年7篇 12月2篇 11月2篇 10月1篇 07月1篇 01月1篇 2020年13篇 12月1篇 10月1篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 03月1篇 01月1篇 2019年17篇 12月6篇 11月6篇 10月1篇 09月1篇 08月1篇 04月1篇 03月1篇 2018年15篇 12月1篇 11月1篇 10月3篇 09月1篇 08月2篇 07月3篇 06月2篇 05月1篇 01月1篇 2017年9篇 12月1篇 11月1篇 07月1篇 05月2篇 04月1篇 01月3篇 2016年9篇 12月1篇 11月2篇 10月1篇 08月1篇 06月1篇 03月2篇 02月1篇 2015年20篇 10月6篇 09月3篇 08月1篇 07月1篇 06月2篇 04月1篇 03月3篇 02月1篇 01月2篇 2014年61篇 11月8篇 10月4篇 09月5篇 07月3篇 06月5篇 05月8篇 04月6篇 03月8篇 02月11篇 01月3篇 2013年9篇 12月3篇 11月4篇 05月1篇 04月1篇 2012年20篇 12月1篇 11月3篇 10月4篇 09月3篇 08月2篇 07月1篇 06月6篇
推荐/精选
原创

全部原创转载翻译

MySQL 5.7.17 VS MariaDB 10.1.19 Enterprise性能压测

为了验证MariaDB官网压测结果，特找了三台低配物理机做压测https://mariadb.org/maria-10-1-mysql-5-7-commodity-hardware/192.168.143.244 sysbench 192.168.143.245 MySQL 5.7.17 192.168.143.246 MariaDB 10.1.1

mysql

压测

mariadb

原创 2017-01-04 14:37:08 6615 阅读 3点赞 3评论

TiDB VS MariaDB10.1.19 Enterprise性能压测

视频演示：https://pan.baidu.com/s/1qYRMp7Q工具sysbench0.5 128并发 10张表100万行硬件配置R720 64G RAID10(15000转)分别压测100秒sysbench --test=/root/soft/sysbench-0.5/sysbench/tests/db/oltp.lua --mysql-table-engine=innod

ERP

tidb

原创 2017-01-02 00:35:14 8392 阅读 3点赞 1收藏 4评论

pt-online-schema-change你今天滥用了吗？

注：本文来自真实生产案例，感谢网友小豚提供，本人加以故障重现校验。场景因想整理一下线上的独立表空间碎片，故使用了pt-online-schema-change在slave从库上执行，目的是怕影响主库的CPU，维护的时候再进行一次主从切换，然后再收缩主库上的表空间碎片。slave从库上执行的命令如下：# pt-online-schema-change -S /tmp/m

schema

online

原创推荐 2016-12-06 13:39:21 7801 阅读 11点赞 2收藏 7评论

MySQL5.7 切不要"乱射" --transaction-write-set-extraction=MURMUR32

今天早上一个朋友找到了我，说他们备份失败了，使用的版本为MySQL 5.7.15报错信息如下：mysqldump: Couldn't execute 'SAVEPOINT sp': The MySQL server is running with the --transacti

备份

mysql

导出

原创推荐 2016-11-23 11:52:33 6801 阅读 3点赞 3收藏 1评论

MaxScale2.0.1结合Java Druid连接池实现读写分离注意事项

现象：程序会不定时的出现连接错误，问题bug的异常信息如下：The last packet successfully received from the server was 116 milliseconds ago. The last packet sent successfully to the server was 115 milliseconds ago.java.sql.SQ

连接池

读写分离

原创推荐 2016-11-04 14:17:39 5437 阅读 4点赞 1收藏 2评论

让pt-slave-restart支持MariaDB

restart

slave

原创推荐 2016-10-25 16:21:56 2928 阅读 2点赞 2评论

MySQL管理之道：第二版上市！China-Pub首发

订购网址：http://product.china-pub.com/4977176http://product.dangdang.com/24032329.htmlhttp://item.jd.com/11973797.htmlhttps://www.amazon.cn/MySQL%E7%AE%A1%E7%90%86%E4%B9%8B%E9%81%93-%E6%80%A7%E8%83%BD%E8%

mysql

书

原创 2016-08-31 11:55:54 2849 阅读 8点赞 28评论

MariaDB 10审计日志去除记录select操作

默认情况下，记录select操作完全是蛋疼的功能，记录一些没有必要的操作。去除以后，只会记录增删改、DDL操作。安装使用：把附件里的server_audit.so放入到/usr/local/mysql/lib/plugin/并chown mysql.mysql server_audit.so> INSTALL PLUGIN server_audit S

mysql

audit

审计

原创 2016-06-29 18:36:07 1451 阅读 3点赞 2收藏

一步完成 MySQL 向 Redis 迁移

参考国外大牛的方法，http://www.oschina.net/translate/mysql-to-redis-in-one-step实验成功，以下是操作方法：MySQL表结构数据[test]> select * from hechunyang;+----+--------+---------+| id | myname | mymoney |+----+--------+-------

mysql

迁移

redis

原创 2016-03-10 12:58:15 1704 阅读 1点赞 1收藏

SQL语句常见优化十大案例

1、慢SQL消耗了70%~90%的数据库CPU资源；2、SQL语句独立于程序设计逻辑，相对于对程序源代码的优化，对SQL语句的优化在时间成本和风险上的代价都很低；3、SQL语句可以有不同的写法；下面是我总结的一些SQL常见的优化方法，每个案例都简单易懂，在开发过程中可以作为参考：1、不使用子查询例：SELECT * FROM t1 WHERE id (SELECT id FROM t2 WHERE

优化

SQL

原创 2016-03-03 13:52:17 9263 阅读 6点赞 2评论

select 忽略查询字段值大小写【小技巧】

表记录：(root@localhost) [test]> select * from t; +----+------+ | id | name | +----+------+ | 1 | a | | &nb

忽略大小写

原创 2016-02-17 21:31:37 1921 阅读 1点赞

HaProxy VS MaxScale VS OneProxy压测对比（虚拟机环境）

测试工具mydbtest_linux64.binHaProxy VS MaxScale VS OneProxy -----接两台slave亮剑结果：结论：HaProxy 和 MariaDB MaxScale奇虎相当。

haproxy

mariadb

oneproxy

maxscale

原创 2015-10-30 15:18:18 2967 阅读 1点赞

MySQL实战课程---通过录像手把手带您学会当前互联网流行架构

通过本课程，可以让您学会当前互联网流行的高可用架构搭建MHA(Master High Availability)，VIP机制不采用Keepalived实现（会出现脑裂），通过修改脚本实现。以及读写分离，分库分表中间件Oneproxy和MariaDB MaxScale，以及Percona/MariaDB Galera Cluster集群+Haproxy的搭建和维护。为您今后的就业，助一臂之力！另外，

MySQL实战课程

原创 2015-10-21 18:29:04 3532 阅读 2点赞 2评论

MySQL中AES_ENCRYPT('密码','钥匙')函数可以对字段值做加密处理

MySQL中AES_ENCRYPT('密码','钥匙')函数可以对字段值做加密处理 AES_DECRYPT(表的字段名字,'钥匙')函数解密处理例，表结构：现在插入一条数据，对passwd密码字段加密。INSERT INTO credit_card(cid,NAME,email,passwd)

加密

mysql

原创推荐 2015-10-10 17:07:31 6068 阅读

/dev/sr0光驱挂载引起的CPU io_wait升高一“血案”

定期巡检发现一个怪异的问题，/dev/sr0光驱挂载引起的CPU io_wait升高，请看截图：快接近凌晨了，这时候已经没啥业务了，可以看到CPU的us使用率已经是0，但CPU第12个核出现了100.0%wa，load负载是1.0，太诡异了。立即用iotop命令查看，哪个进程占用IO过高，发现了挂载光驱引起的真凶，请看截图：可以明显的看到/dev/sr0光驱占用大量IO操作。查看系统日志，发现了错

cpu升高

原创推荐 2015-10-01 00:47:09 7458 阅读 5点赞 1评论

MariaDB 10.0.X中，动态列支持 JSON 格式来获取数据。

MariaDB 10.0.X中，动态列（Dynamic Columns），可以支持 JSON 格式来获取数据。为了兼容传统SQL语法，MariaDB 10和MySQL5.7支持原生JSON格式，即关系型数据库和文档型NoSQL数据库集于一身。使用说明：###表结构create table assets ( item_name var

json

mongodb

动态列

mariadb

原创推荐 2015-09-12 22:51:46 10000+阅读 1收藏

总结一下，MariaDB 10（MySQL5.6企业版分支）的主要新特性

① 支持48核的CPU，而5.5支持24核的CPU② 内存热数据持久化，我们知道当系统重启或者mysql进程重启后，Innodb的内存池里面的热数据全部清空，需要重新把磁盘的数据缓存进来，然后根据 LRU最近最少使用原则，把热数据保持在内存里，冷数据踢出到磁盘里。这个过程是缓慢的。5.6里改进了这一点，会自动把内存的热数据导出到磁盘里，这样 mysql重启后，会立即从磁盘里导入Innodb内存池

mariadb

原创 2015-09-11 17:21:47 2549 阅读

MariaDB 10 Slave Crash-Safe需转为GTID复制模式

之前写了一篇《MySQL5.6 crash-safe replication》，但在Mariadb10.0.X和10.1.X上不支持relay_log_info_repository = TABLE参数，官网建议用GTID复制模式代替传统复制模式，传统复制模式是不支持Slave Crash-Safe的。在mysql库下，会有一张gtid_slave_pos表（在安装初始化时，就已经是innodb

gitd

crash safe

mariadb10

原创 2015-09-02 16:07:52 1304 阅读

oneproxy中间件架构及注意事项

分布式数据库实现方案总体划分为两类：一类是程序客户端实现，对一个已有的业务来说，会涉及过多的代码改动甚至是程序逻辑上的调整。另一类是采用中间件proxy方案，前段代码改动小，通过proxy实现。架构图如下：---------------------------------------------------------------------------------------这里总结一下JAVA

proxy

中间件

oneproxy

altas

原创推荐 2015-08-17 10:12:35 2467 阅读 1点赞 2评论

OneProxy中间件生产使用经验视频分享

在调研各种开源中间件，如阿里Cobar/Tddl, Mycat, 官方Mariadb Spider,奇虎360 Altas, 官方MySQL proxy/Fabric，在功能和性能上，以及维护成本上，OneProxy更适合我这边的业务。测试+上线，历时一个月，OneProxy运行稳定，解决了目前我这边的连接池，读写分离(延迟1秒的Slave自动踢下线，强制走主库)。在安全方面，通过Onefirew

中间件

读写分离

oneproxy

原创 2015-07-05 21:53:41 3450 阅读 6点赞 10评论

oneproxy检测主从复制同步延迟

Q:为什么要实现读写分离延迟检测？A:就好比你在ATM机存钱，你老婆收到短信后乐呵呵的拿网银APP查看，结果钱没过来。其实钱已经到账了，只是查询的ATM机节点钱还没过来。所以我们dba要监控数据，一旦发现钱没有复制到另一ATM机节点，会强制你从存钱的那个ATM机节点去查看。读写分离可以通过php yii框架、java mybatis框架实现，但主从复制的延迟检测一直是重难点，OneProxy内部支

延迟

读写分离

oneproxy

原创 2015-06-24 11:13:08 1439 阅读 1点赞 2评论

51CTO学院两周岁啦，贺春旸送上祝福！

致 51CTO学院全体工作人员： 2年前，运营总监曹亚莉为我的书写序，邀请我加入学院讲课，一直非常感激给我这个机会，可以让更多的网友认识我，我也有幸可以给大家分享一些MySQL知识，本人不是专业讲师，所以讲得不好，也请海涵。转眼间，已经过去两年，学院拥有了大量的一线互联网公司讲

510学院

原创 2015-06-11 21:57:07 1587 阅读 3点赞 2评论

mysqldiff对比主从表结构是否一致

mysqldiff该工具是官方mysql-utilities工具集的一个脚本，可以实现主从服务器表结构是否一致。数据校验需要使用Percona的pt-table-checksum工具。安装：# tar zxvf mysql-utilities-1.5.4.tar.gz # cd mysql-utilities-1.5.4 # python

mysql

主从表

mysqldiff

原创推荐 2015-04-17 13:10:41 4860 阅读 1评论

MariaDB Spider分库分表引擎调研

视频地址：http://edu.51cto.com/index.php?do=lesson&id=56128

spider

mariadb

分库分表

原创 2015-03-23 15:43:14 3503 阅读

Percona5.6自身已支持杀死慢SQL

还在为慢SQL而烦恼吗？如今Percona5.6解决了这个问题，这个补丁是由Twitter提供。通过max_statement_time参数控制（单位毫秒），默认为0，不限制，假如你定义了超过5秒的慢SQL，由DB自动杀死，那么就要设置set global max_statement_time = 5000;下面通过截图，看例子：可以看到，DML/DDL语句

mysql

kill

slow

percona

慢sql

原创推荐 2015-03-16 18:24:11 4363 阅读 4点赞 2评论

小技巧：Percona5.5/5.6可以杀死空闲事务

这个特性是在Percona Server 5.5中引入的。当一个事务长时间未提交，那么这个链接就不能关闭，内存就不释放，并发一大，导致DB连接数增多，就会对性能产生影响。innodb_kill_idle_transaction参数默认是5秒，你可以根据自己的情况设定伐值。超过这个限制，服务端自动杀死未提交的空闲事务。下面的截图展示了这一过程：注：官方MySQL5.5/5.6是没有这个参数的。

mysql

kill

percona

原创 2015-03-16 16:45:27 1270 阅读 1点赞 2评论

MySQL5.6 crash-safe replication一个坑

事情起因：唯品会一个DBA找到我，说他们的slave掉电，再重启服务器以后，同步复制就挂了，报1032和1062错误，首先排查了在从库上没有写操作，之后询问了他们的参数。这是他们的参数：sync_master_info = 1 sync_relay_log_info = 1 relay_log_info_repository = FILE

crash

slave

mysql5.6

原创推荐 2015-02-27 17:34:57 9664 阅读 3点赞 1收藏 1评论

redis-dump-load数据导出导入备份工具使用介绍

安装：# wget https://codeload.github.com/andymccurdy/redis-py/zip/master # cd redis-py-master # python setup.py install使用：# wget https://codeload.github.com/p

备份

导出

导入

redis

原创 2015-01-26 15:18:21 2333 阅读

MySQL5.7 设置同步复制过滤不用重启mysql服务进程了

在MySQL5.5/5.6里版本里，设置同步复制过滤，例如设置忽略掉test库的t2表，你需要在my.cnf配置文件里增加：replicate-ignore-table=test.t2必须重启mysql服务进程才能生效。在MySQL5.7里，通过一个新的命令，可以支持在线动态修改，而不须重启mysql进程就生效。Example:CHANGE REPLICATION FILTER

复制

replication

mysql5.7

原创推荐 2014-11-27 14:44:11 10000+阅读 2点赞 2评论

MySQL5.7 开启GTID复制模式终于不用开启log_slave_updates参数了

MySQL5.6的GTID复制模式，必须开启log_slave_updates参数，否则启动就报错，因为需要在binlog找到同步复制的信息（UUID:事务号），如果在密集型写的环境，比如双十一大促在线支付，这无疑增加了从库不必要的磁盘IO开销。（注：开启log_slave_updates参数，是把relay-log里的日志内容再记录到slave本地的binlog里。）但在MySQL5.7里，官方

GTID

mysql5.7

log_slave_updates

原创推荐 2014-11-18 17:18:04 10000+阅读 5点赞 4评论

欢迎

首页
4
5
6
7
8
9
10
11
共311条记录

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

贺春旸的技术博客

MySQL 5.7.17 VS MariaDB 10.1.19 Enterprise性能压测

TiDB VS MariaDB10.1.19 Enterprise性能压测

pt-online-schema-change你今天滥用了吗？

MySQL5.7 切不要"乱射" --transaction-write-set-extraction=MURMUR32

MaxScale2.0.1结合Java Druid连接池实现读写分离注意事项

让pt-slave-restart支持MariaDB

MySQL管理之道：第二版上市！China-Pub首发

MariaDB 10审计日志去除记录select操作

一步完成 MySQL 向 Redis 迁移

SQL语句常见优化十大案例

select 忽略查询字段值大小写【小技巧】

HaProxy VS MaxScale VS OneProxy压测对比（虚拟机环境）

MySQL实战课程---通过录像手把手带您学会当前互联网流行架构

MySQL中AES_ENCRYPT('密码','钥匙')函数可以对字段值做加密处理

/dev/sr0光驱挂载引起的CPU io_wait升高一“血案”

MariaDB 10.0.X中，动态列支持 JSON 格式来获取数据。

总结一下，MariaDB 10（MySQL5.6企业版分支）的主要新特性

MariaDB 10 Slave Crash-Safe需转为GTID复制模式

oneproxy中间件架构及注意事项

OneProxy中间件生产使用经验视频分享

oneproxy检测主从复制同步延迟

51CTO学院两周岁啦，贺春旸送上祝福！

mysqldiff对比主从表结构是否一致

MariaDB Spider分库分表引擎调研

Percona5.6自身已支持杀死慢SQL

小技巧：Percona5.5/5.6可以杀死空闲事务

MySQL5.6 crash-safe replication一个坑

redis-dump-load数据导出导入备份工具使用介绍

MySQL5.7 设置同步复制过滤不用重启mysql服务进程了

MySQL5.7 开启GTID复制模式终于不用开启log_slave_updates参数了

欢迎