arthur376的博客_Mysql,MongoDB,自动化运维,云平台,KVM,redis,安全技术,Docker,原创,转载

codis3.2.1集群搭建与测试

codis3.2.1集群测试报告Codis是一套用go语言编写的,为了应对高并环境下的redis集群软件,原理是对一个redis key操作前,先把这个key通过crc32算法,分配到不同redis的某一个slot上,实现并发读写功能.而且能通过zookeeper调用redis-sentinel来实现故障切换功能.现在最新版本是3.2.1,依托于redis3.2.9开发出来.优点:实现高并发读写,

codis

redis

原创 2017-12-19 10:36:34 10000+阅读 2点赞 3收藏 1评论

mysql+mycat压力测试一例

前言有很多人担心生产系统上新东西的程序怕压力跟不上和稳定性不行,是的,大家都怕,所以领导要求做一次压力测试,我个人也觉得是有必要的.如果按原理来说,mycat如果不做分片,纯粹只是代理的话,他所做的事情,其实更多的是数据转发,而这个转发能力,当然就是看他能有多强.既然理论上转发能力很强,那么是不是就可以忽略不计呢,当然不是,所以需要用直连mysql的测试数据来做对比.测试前的准备第一步当然是安装好

mysql

mycat

sysbench

原创 2017-11-29 13:42:41 10000+阅读 2点赞 2收藏

mysql主从复制跳过复制错误

跳过复制错误mysql因为binlog机制问题，有些时候会出现从库重放sql执行失败的情况，特别是旧的STATEMENT模式最容易出现这种情况（因为函数和存储过程等原因），这也是为什么强调使用mixed和row模式的原因。另外就是一些外部XA事务，因为XA事务日志不在mysql中，有时候会出现回滚失败的情况，导致主从报错。出现这些状况那该怎么办好呢？如果是重做，虽然是可以，但是如果库非常大，那耗时

mysql

主从复制

原创 2017-09-30 10:36:03 10000+阅读 1点赞

pt-table-checksum与pt-table-sync使用实践

--------------原文地址：http://www.cnblogs.com/gomysql/p/3662264.htmlmysql在工作中接触最多的就是mysql replication，由于现在公司也还在使用mysql 5.1.x版本，在复制方面还是比较多的问题，比如主库宕机或者从库宕机都会导致复制中断，通常我们需要进行人为修复（mysql 5.5版本解决大部分问题），或者很多时候需

mysql 复制 pt工具

转载 2017-09-07 14:22:22 4736 阅读

NGINX安全配置和限制访问

说起网络***，可能很多人只知道大名鼎鼎的DDOS***，这种***廉价且效果出众，直接通过第四层网络协议用他的带宽把你的带宽顶掉，造成网路阻塞，防不胜防，就连腾讯这种大鳄公司也被大流量DDOS搞过焦头烂额。暂时的解决方法只有三种，第一种就是你要够有钱，买强大的高级防火墙，或者使用的带宽足够大，无视这些网络流量。第二种是技术足够强，例如个别有技术的大牛公司（阿里），用类如DPDK的高效数据包处理驱动，开

web nginx

原创 2017-08-02 15:51:03 10000+阅读

mysql慢查询功能详解

有人的地方就有江湖，数据库也是，sql优化这个问题，任重道远，我们总是禁不住有烂sql。怎么办呢，还好各大数据库都有相关烂sql的收集功能，而mysql的慢查询收集也是异曲同工，配合分析sql的执行计划，这个优化就有了搞头了。开启mysql慢查询日志1.查看当前慢查询设置情况#查看慢查询时间，默认10s，建议降到1s或以下， mysql> show variables&n

mysql

优化

慢查询

原创 2017-07-19 15:22:11 10000+阅读 1收藏

mysql版本升级

版本升级:mysql版本很多，有5.5,5.6,5.7都可能,有时候我们的目的是升级数据库版本.升级的方法有两种，第一种就是用mysqldump方式来操作，因为导出来就是sql语句，所以直接导进去新库就是升级了。例如:#在旧库导出 mysqldump -uroot -p'****' -h10.0.2.4 -P3307 --triggers

升级

mysql

版本

原创 2017-07-04 17:05:08 2107 阅读 2收藏

mysql多源复制详解

大家应该知道，mysql比起其他数据库，最大的特色是就是主从复制，不过5.7之前的版本最多就只支持一主多从的复制方式，对于一些统计类的需求，就需要跨库，这是比较麻烦的事情，以往只能交由数据库中间件（mycat等）去做这种事情，还有备份操作，也只能一个个库的用脚本去轮询或并发备份，不可谓不费时费力。然后，多源复制的概念出来了。多源复制的概念最早是mariadb社区提出的，后来mysql官方积极引入到

mysql

复制

多源复制

原创 2017-07-04 10:13:38 3984 阅读

processlist中哪些状态要引起关注

一般而言，我们在processlist结果中如果经常能看到某些SQL的话，至少可以说明这些SQL的频率很高，通常需要对这些SQL进行进一步优化。今天我们要说的是，在processlist中，看到哪些运行状态时要引起关注，主要有下面几个：状态建议copy to tmp table执行ALTER TABLE修改表结构时建议：放在凌晨执行或者采用类似pt-osc工具Copying to tmp tabl

mysql processlist

转载 2017-06-19 15:10:41 1145 阅读

使用docker下载搭建TeamCity容器并使用

其实我也不知道TeamCity有什么用,不过开发叫装,而且看起来也挺方便的.TeamCity 入门先来看一段官网的介绍视频这个视频其实已经很清楚地说明了一个整理流程是怎样的，我今天只是做一个更加清晰的细节讲解而已你需要穿越：https://www.youtube.com/watch?v=J-iYMMG6jmc#action=shareTeamCity

java TeamCity

翻译 2017-06-19 15:05:42 3377 阅读

mysql字符集与校对规则---大小写敏感那点事

在关系型数据库中,oracle/sql_server/db2都有对数据进行区分大小写,不过mysql有点奇怪,对数据不区分大小写,详细情况请看下面解析. MySQL在Linux下数据库名、表名、列名、别名大小写的默认规则是这样的： &n

mysql 字符集字符校对

原创 2017-05-18 15:29:34 8599 阅读

iotop简介

iotop顾名思义就是监控磁盘io状况的,不过他比iostat并没有优秀多少,只是独立统计了每个进程的io状况,比较清晰明了的看出来究竟是那个进程IO占用比较高,这点比较方便.安装和使用都很简单:安装:yum install -y iotop1.用法:iotop [OPTIONS]2.界面说明:TID: 进程的PIDUSER:

磁盘

linux

io

原创 2017-04-13 15:26:13 5133 阅读

linux系统字符编码详解

众所周知,地球上的语言多种多样,在计算机世界,自然也是要适应各种语言.我们安装各种系统的时候也是明示了要选择语言环境和支持的语言环境. 而linux系统的字符编码设置尤为复杂,这可能也是没有考虑到非技术人员去研究这些东西吧. 我遇到的事情是这样的,我们使用了d

linux

字符编码

locale

原创 2017-04-12 11:17:14 3806 阅读

chattr命令,设置linux文件的隐藏权限

很不幸,我公司的服务器被黑客光顾了,安插了一个名字叫8899的恶意程序文件在tomcat下面的bin目录,还好我火眼金睛,用top看出了端倪,竟然发现ps命令也被他替换了,真是有点麻烦了,不过没关系,去虚拟机拷一个替换就好.然而重点是,这个8899的文件居然是删不掉的,报错Operation not permitte,然后网上查资料,原来是chattr命令搞的鬼.chattr命令可以设置文件的隐藏

linux

文件权限

chattr

原创 2017-04-08 10:21:42 6418 阅读

iftop工具简介

日常运维工作中,流量监控和分析是最难做到的,一般情况下我们要结合netstat和网卡流量来分析,相当麻烦.不过强大的linux社区让一切都可以变得简单,流量监控分析工具应运而生,其中比较出名的,正是iftop.iftop(流量监控工具)安装:yum install -y iftop界面相关说明界面上面显示的是类似刻度尺的刻度范围，为显示流量图形的长条作标尺用的。中间的<= =>这两个左

网络

流量监控

原创 2017-04-06 20:35:29 511 阅读

pmap工具简介

pmap工具是linux的工具,能够查看进程用了多少内存,还能分析内存用在上面环节,对于一些长期占用内存居高不下的程序可以分析其行为,命令简单,信息简洁.pmap(查看进程用了多少内存)安装:好像是自带的(原生是sun os的命令)用法:pmap [参数] PID界面说明:Address: 内存开始地址Kbytes: 占用内存的字节数（KB）RSS: 保留内存的字节数（KB）Dirty: 脏页的字

linux

内存

原创 2017-04-06 20:30:33 7969 阅读

路由跟踪工具简介

有学习过网络都知道,网络从来不是两点一线的,所谓路由跟踪,目的就是看看那一段网络出了问题,对于排查网络故障有很大的用途.首先说的工具就是古老而又出名的traceroute(win称tracert),安装简单,win甚至自带traceroute(win称tracert):安装:yum install -y traceroute用法:traceroute [参数] hostname(ip)tracer

网络

路由跟踪

原创 2017-04-06 20:26:52 3063 阅读

innotop使用简介

innotop是一个mysql数据库实时监控工具,其功能强大,信息种类繁多,很能体现数据库的状态. 它实际上是一个perl脚本,整合show status/show variables/show engine innodb status输出结果并进行统计和格式化输出.安装:yum install -y i

mysql

innotop

原创 2017-04-06 20:17:37 1962 阅读

mysql之show engine innodb status解读

mysql之show engine innodb status解读注：以下内容为根据《高性能mysql第三版》和《mysql技术内幕innodb存储引擎》的innodb status部分的个人理解，如果有错误，还望指正！！　　innodb存储引擎在show engine innodb status（老版本对应的是show innodb status）输出中，显示除了大量的内部信息，它输

mysql show engine in

转载 2017-04-06 11:19:41 7210 阅读

mysql状态信息参数解析(show GLOBAL status)

Show global status 在Show global status输出中的项可以用mysqladmin -r -i 1 ext代替,结果一样,获取的是mysql数据库状态变量的每秒累计值,Show status则是代表获取当前值,但是会有一些参数会一致.Aborted_clients由于客户端没有正确关闭连接导致客户端终止而中断的连接数。除了网络原因外,还可能是长时间保持的连接在wait

mysql

status

原创 2017-03-14 11:43:36 5615 阅读

pt(Percona Toolkit)工具详解:(二)工具介绍

之所以先写介绍,那是因为太多工具,要查起来非常麻烦,要先做个汇总介绍,方便查找.介绍1.找出重复的索引和外键 pt-duplicate-key-checker这个工具会将重复的索引和外键都列出来，并生成了删除重复索引的语句，非常方便2.执行alter的时候不会阻塞写和读取操作 pt-online-schema-change非常

mysql

工具

pt

原创 2017-01-20 10:08:58 10000+阅读

pt(Percona Toolkit)工具详解:(一)安装

pt(Percona Toolkit)工具是由Percona公司开发的一个用perl语言编写的工具集,包含很多功能,例如在线更改数据表结构,校验主从数据,检查数据库状态,分析慢查询等这些靠人手做起来比较麻烦的事情,功能强大,操作简单.安装既然是perl语言开发的工具集,那当然是先安装perl相关依赖包了yum install -y perl perl-IO-

mysql

工具

pt

原创 2017-01-19 18:53:12 10000+阅读

orzdba安装与使用

orzdba是淘宝DBA团队开发出来的一个perl监控脚本,主要功能是监控mysql数据库,也有一些磁盘和cpu的监控选项,好不好用就见仁见智,毕竟各公司需求不尽相同.安装:既然是perl脚本,那当然是先装各种perl相关的依赖包和控件:yum install -y perl-Test-Simple.x86_64 perl-Time-HiRes p

mysql

监控

orzdba

原创 2017-01-04 14:56:57 10000+阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

ping_note

codis3.2.1集群搭建与测试

mysql+mycat压力测试一例

mysql主从复制跳过复制错误

pt-table-checksum与pt-table-sync使用实践

NGINX安全配置和限制访问

mysql慢查询功能详解

mysql版本升级

mysql多源复制详解

processlist中哪些状态要引起关注

使用docker下载搭建TeamCity容器并使用

mysql字符集与校对规则---大小写敏感那点事

iotop简介

linux系统字符编码详解

chattr命令,设置linux文件的隐藏权限

iftop工具简介

pmap工具简介

路由跟踪工具简介

innotop使用简介

mysql之show engine innodb status解读

mysql状态信息参数解析(show GLOBAL status)

pt(Percona Toolkit)工具详解:(二)工具介绍

pt(Percona Toolkit)工具详解:(一)安装

orzdba安装与使用