hxl2009的博客_Mysql,负载均衡&集群&HA,分布式,Linux管理,容灾,运维自动化,虚拟化,lamp,linux系统应用技巧,监控系统,mysql(1)

CentOS 6.4 内核升级（2.6.32 -> 3.18.19）

升级的目的是想在CentOS6.4上运行docker，官方建议内核版本在3.8.0及以上，于是就自己从Linux内核官方网站上下载源码，自己编译安装软件编译安装新内核，依赖于开发环境和开发库yum grouplist //查看已经安装的和未安装的软件包组，来判断我们是否安装了相应的开发环境和开发库；yum groupinstall "Development Tools"

升级内核

centos6

置顶原创 2015-07-26 14:23:04 5077 阅读 1点赞

服务器bios调整机器为高性能模式

服务器出厂时，BIOS 默认达到了性能和能耗之间的良好平衡，以适应一般环境，但是在高负载环境中，就需要对服务器进行优化不需要节能模式（720xd 机器load到20+就尼玛自己hang了），以获得最大的吞吐量或最低的延迟以下是dell R710的配置调整* 可测试自身的环境，以确定 Turbo 模式是否有利于您的负载。 R710 调整最大性能模式：F2进入BIOS-powerManage

服务器

dell

power

最大的

吞吐量

置顶原创 2015-06-10 16:53:14 10000+阅读

tcp_tw_reuse、tcp_tw_recycle 使用场景及注意事项

tcp_tw_reuse tcp_tw_

置顶原创 2015-06-04 12:01:54 4778 阅读

Redis文件连接数不够导致listen sock总是可读CPU跑满

前几天碰到碰到一个线上redis CPU跑满的情况，基本无法处理正常请求了，刚开始以为是其他地方的问题，后来grep "Max open files" /proc/`pidof redis-server`/ -r 排查原来是启动redis的时候。ulimit -n 只有1024，从而无法接受新连接。晚高峰时间段突发的大量请求导致redis连接数超过1024，从而listen sock

cpu

redis

置顶原创 2014-08-22 17:42:47 8230 阅读 1点赞 1评论

使用国内镜像源来加速python pypi包的安装

pipy国内镜像目前有：http://pypi.douban.com/ 豆瓣http://pypi.hustunique.com/ 华中理工大学http://pypi.sdutlinux.org/ 山东理工大学http://pypi.mirrors.ustc.edu.cn/ 中国科学技术大学对于pip这种在线安装的方式来说，很方便，但网络不稳定的话很

python

pip

pypi

置顶原创 2013-12-02 12:02:33 8451 阅读

python pip包管理

pip 是一个安装和管理 Python 包的工具 , 是 easy_install 的一个替换品。本文将详细说明安装 pip 的方法和使用 pip 的一些基本操作如安装、更新和卸载 python 包。distribute是setuptools的取代(Setuptools包后期不再维护了)，pip是easy_install的取代。pip的安装需要setuptools 或者 dist

python

pip

easy_install

置顶原创 2013-12-02 11:55:38 10000+阅读

nginx和haproxy代理时对后端的长连接分析

由于代理服务器上开启了长连接后，可以减少每次与后端服务器的三次握手，提高后端服务器的效率。所以nginx在1.1.4版本中终于增加了upstream对keepalive的支持，而haproxy原本对后端是支持长连接的（但是这个时候由于不能把client的IP加到header转发给后端服务器造成会丢失客户端的IP）。今天简单测试了一下。基本的结构是A:Client –> nginx(prox

haproxy

长连接

置顶原创 2013-11-15 12:11:10 10000+阅读 1收藏

也说说LVS模式的选择

觉得很多人都对这个选择存在疑惑，就简单写写。LVS主要是DR,TUN,NAT和淘宝的FULLNAT模式，对于绝大部分人而言只能选择原版内核支持的前三种。1.DR模式DR模式是效率最高的一种，对于每个请求LVS把目的mac改成从RS中选择的机器的mac，再将修改后的数据帧在与服务器组的局域网上发送。但是局限性是LVS机器需要和RS至少能有一个网卡同在一个VLAN下面，这样限制了DR模式只能在比较单一

lvs

模式选择

置顶原创 2013-11-14 18:12:37 7721 阅读 1点赞

curl 命令行上传文件

现在nginx大行其道，一般在机器上装个nginx 简答配置下就可以做upload用了。主要需求是开发那边需要运维这边投递一些app_log和一些history log。下面讲解下直接用curl命令上传。第一种：server端有现成的ftpserver：上传的option是 -T 比如我们向ftp传一个文件： curl -T localfile -u name:passwd ftp://uploa

curl

curl上传

置顶原创 2013-11-14 12:15:09 10000+阅读 1点赞

nginx 限速

注意：nginx 1.1.8 之后的版本的语法改为limit_conn_zone $binary_remote_addr zone=NAME:10m;NAME 就是 zone 的名字详情请看这里 http://nginx.org/en/docs/http/ngx_http_limit_conn_module.html限制连接数:要限制连接，必须先有一个容器对连接进行计数，在http段加入如下代码：

限速

nginx

nginx限速

置顶原创 2013-11-13 16:41:35 10000+阅读 1点赞

windows下缩短time_wait的时间

最近线上遇到windows机器访问其他机器的时候失败的情况。实际就是本地的端口不够用造成的。D:\>netsh interface ipv4 show dynamicportrange protocol=tcpProtocol tcp Dynamic Port Range---------------------------------Start Port : 49152Number o

windows

time_wait

置顶原创 2013-11-13 10:19:17 10000+阅读 2点赞 1评论

找出IO消耗较高的进程

经常碰见服务器IO比较慢，这个是最不能忍受的，因为基本的命令行操作都会非常慢。网上搜了下，可以按照这个方式直接找出耗IO最高的进程名。1.先停掉syslog然后打开block dump service syslog stop echo 1 > /proc/sys/vm/block_dump2.从dmesg的中找到消耗IO的进程 dmesg | grep -E “READ|WRITE|d

找出IO消耗较高的进程

置顶翻译精选 2013-11-13 10:14:40 1342 阅读

我的友情链接

曲宝全的Linux世界山岳不知itnihao马儿努力学习，天天向上顺妻自然虫子feixianglinuxer无云安全技术站张宴晓辉漂博抚琴煮酒licessalidba蚊子网海过客木子akin5205ydycmlinuxguest

原创 2017-11-22 23:08:06 694 阅读

Oracle oci php连接故障记录

通过php mod连接oracle报错：please check that ORACLE_HOME is set and points to the right directory把apache运行的用户环境变量改了还是解决不了，间歇性加载不了环境变量。oci8.so模块也正常加载，环境变量也正常读取。但是php页面就是不加载oracle的环境变量输出异常。最后更改写入apachectl的文件：v

oracle

product

原创 2013-07-29 11:33:55 1123 阅读

nginx_logrotate shell

#!/bin/bashdate=$(date "+%H:%M")date1=$(date +%F)date2=$(date +%F -d last-day)date3=$(date +%k)date4=$(date +%M)PID=/usr/local/nginx/logs/nginx.pidbak_dir=/usr/local/nginx/logs/log_bak/${dat

nginx_logrotate shel

原创 2013-06-19 09:18:47 1303 阅读

keepalived update arptables

look:yum -y install arptables_jfvim dr.sh#!/bin/sh# chkconfig: 2345 90 10# description: Preparing for Load Balancer and Real Server switchingVIP=124.160.156.149LOCAL_IP=124.160.156.155BROADCAST=124.16

arptables

原创 2013-06-19 09:17:26 827 阅读

Tsung安装

http://tsung.erlang-projects.org/ Tsung压力测试工具的工作原理介绍（1） Tsung的每一个虚拟用户就是一个erlang的轻量进程。这点和loadrunner有大区别。（2）虚拟用户完成session后就消失。（3）大量的虚拟用户（erlang轻量进程）建立在erlangVM上。Tsung安装包、erlang安装包、P

tsung

原创 2013-06-19 09:15:31 8590 阅读

安装php扩展sphinx

cd /home/packageswget http://sphinxsearch.com/files/sphinx-0.9.9.tar.gztar xzvf sphinx-0.9.9.tar.gzcd sphinx-0.9.9/api/libsphinxclientvim sphinxclient.c

sphinx

原创 2013-06-19 09:03:39 6339 阅读 1点赞

通过tune2fs释放Linux系统预留的硬盘空间

转载vpsee http://www.vpsee.com/2012/09/release-linux-system-disk-space-using-tune2fs/ 大多数文件系统都会保留一部分空间留作紧急情况时用（比如硬盘空间满了），这样能保证有些关键应用（比如数据库）在硬盘满的时候有点余地，不致于马上就 crash，给监控系统和管理员一点时间去察觉。不过有时候这部分预

tune2fs

转载精选 2012-12-07 11:42:42 2269 阅读

keepalived主备切换后的arp问题

使用keepalived的时候主机挂了，备机显示绑定了VIP。但是此时实际还是不能访问。其实就是网关的arp缓存没有刷新。在服务器上执行一下就行了 arping -I eth0 -c 5 -s VIP GATEWAY 可以修改keepalived的配置文件添加： vrrp_sync_group VG1 { group { &nbs

arp

keepalived

原创 2012-11-28 16:27:01 10000+阅读 1点赞

MySQL Xtrabackup备份和恢复

简介 Xtrabackup是由percona提供的mysql数据库备份工具，据官方介绍，这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具。特点： (1)备份过程快速、可靠； (2)备份过程不会打断正在执行的事务； (3)能够基于压缩等功能节约磁盘空间和流量； (4)自动实现备份检验； (5)还原速度快； Xtrabackup中包含两个工具：&

MySQL

xtrabackup

原创 2012-11-27 17:40:58 2010 阅读

解决kvm虚拟机设置内核bridge参数报未知的key

安装kvm时我们需要设置bridge。当我们安装bridge-util后，会发现/etc/sysctl.conf中添加了与防火墙相关的参数。但是当我们执行sysctl -p时，报错说key未知。这是因为我们没有加载bridge模块，需要手工加载。解决过程如下： [root@vm6 ~]# sysctl -p net.ipv4.ip_forward = 1 net.ipv4.conf.defa

虚拟机

kvm

bridge

未知

原创 2012-11-16 14:36:37 2713 阅读

CentOS5.8+Nginx+uWSGI+Django开发环境

之前使用Nginx+Fastcgi来搭建python web服务器，本文介绍Nginx+UWSGI组合来实现。uWSGI 是一个快速的、纯C语言开发的、自维护的、对开发者友好的WSGI服务器，旨在提供专业的 Python web应用发布和开发。它更符合python web的标准协议，速度要比Fastcgi要快、性能更加稳定。这里有一组性能测试对比 http://ww

django

uwsgi

python开发

原创 2012-10-24 18:25:12 1357 阅读

CentOS5升级ssh到最新版

因为 CentOS 5 上的 SSH/SFTP 服务还是很老的版本 (OpenSSH_4.3p2)，不支持 chroot。 CentOS 源上没有更新的版本，YUM 也无法获取到升级。因此只能从源代码编译安装，这里介绍详细完整的步骤。 yum -y install gcc openssl-devel pam-devel rpm-build 下载 OpenSSH 当前

openssh

sftp

ssh升级

原创 2012-10-24 18:22:44 2577 阅读

spawn-fcgi +uwsgi环境

环境介绍: 系统: CentOS 5.8 64位 Python版本:2.7.3 nginx:1.2.4 首先安装python 2.7.3 wget http://www.python.org/ftp/python/2.7.3/Python-2.7.3.tar.bz2 tar jxvf Python-2.7.3.tar.bz2 cd Python-2.7.3 ./config

python

uwsgi

原创 2012-10-22 23:24:41 1329 阅读

日志分析程序webalizer添加中文支持

下载 wget ftp://ftp.mrunix.net/pub/webalizer/webalizer-2.23-05-src.tar.bz2 tar jxvf webalizer-2.23-05-src.tar.bz2 修改增加中文支持（主要是调用ttf字体的gd函数来生成图片）由于diff文件比较长，这里只帖出关键的部分。 graphs.c + &nb

日志分析

webalizer

原创 2012-10-21 00:47:27 1606 阅读 1评论

nodejs安装及故障解决

给开发搞nodejs环境，遇到点问题记录下过程，备忘。 wget http://nodejs.org/dist/v0.8.12/node-v0.8.12.tar.gz tar zxvf node-v0.8.12.tar.gz cd node-v0.8.12 ./configure --prefix=/usr/local/nodejs File "./configu

python

nodejs

原创 2012-10-19 11:42:07 8600 阅读

升级CentOS5.6_X64 python2.4.3到2.7

升级CentOS 5.6 64位版python到2.7.3 1. 背景 CentOS 5.6自带的Python版本是2.4.3，但是目前许多基于Python的应用软件要求的Python版本应要高于2.4（如iotop、nodejs、func 等要求Python版本至少是2.6以上） 2. 目标将CentOS自带的Python由2.4.3版本升级到2.7.2版本。 3. 实施 wget

yum

python

python2.4

原创 2012-10-19 11:33:21 3597 阅读

pure-ftpd 安装（利用PureDB加密密码）

之前用vsftpd做虚拟用户，线上登陆用户多了，密码是明文存储的不太安全。网上大多数pureftp的文章都是结合mysql来安装的，还要装lamp环境太繁琐了。所以经过研究不用存储在mysql里面密码也是可以加密的。见下文详细安装： cd /opt;wget http://download.pureftpd.org/pub/pure-ftpd/releases/pure-ftpd-

ftp

pureftp

ftp虚拟用户

原创 2012-09-28 13:48:49 5770 阅读 2点赞 1评论

glusterfs故障一例

今天测试glusterfs的时候创建存储组老是提示"/data" or a prefix of it is already part of a volume 心想之前用/data分区测试过，我删除数据试试看，接着创建gluster volume create replicate-stripe replica。。。还是尼玛already part o

gfs

glusterfs

原创 2012-09-17 10:47:22 7605 阅读 4点赞

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

技术成就梦想

CentOS 6.4 内核升级（2.6.32 -> 3.18.19）

服务器bios调整机器为高性能模式

tcp_tw_reuse、tcp_tw_recycle 使用场景及注意事项

Redis文件连接数不够导致listen sock总是可读CPU跑满

使用国内镜像源来加速python pypi包的安装

python pip包管理

nginx和haproxy代理时对后端的长连接分析

也说说LVS模式的选择

curl 命令行上传文件

nginx 限速

windows下缩短time_wait的时间

找出IO消耗较高的进程

我的友情链接

Oracle oci php连接故障记录

nginx_logrotate shell

keepalived update arptables

Tsung安装

安装php扩展sphinx

通过tune2fs释放Linux系统预留的硬盘空间

keepalived主备切换后的arp问题

MySQL Xtrabackup备份和恢复

解决kvm虚拟机设置内核bridge参数报未知的key

CentOS5.8+Nginx+uWSGI+Django开发环境

CentOS5升级ssh到最新版

spawn-fcgi +uwsgi环境

日志分析程序webalizer添加中文支持

nodejs安装及故障解决

升级CentOS5.6_X64 python2.4.3到2.7

pure-ftpd 安装（利用PureDB加密密码）

glusterfs故障一例

欢迎