无言的诗的博客_python,linux系统运维,mysql 数据库,python运维开发转载

日志分析工具Awstats实战之Apache篇-多站点日志分析

前面两篇都在讲述如何去部署nginx下的awstats日志分析工具，现在终于轮到apache。作为老牌的网页服务器，awstats对apache的支持非常完美，所以整个配置过程也是十分简单。因此，在这里我就拓展了一下部署，实现了对多站点的日志分析功能。注意：自本篇博文发表之日，apache-2.4.x还是无法支持部署awstats日志分析结果访问动态化，不过可以用前篇日志分析工具Awstats实战

服务器

server

local

日志记录

非常完美

转载精选 2013-11-02 22:57:54 879 阅读

SVN利用post-commit hooks自动同步代码到生产环境

我们在开发的过程将代码提交到SVN后使用SVN的hook，通过post-commit脚本，在目标文件夹根下执行svn update操作，将更新内容同步到测试环境，这样开发调试非常方便。现在SVN库的文件数量越来越多，svn 本地的目录已经3个多G了，几十万个文件，在目标文件夹下执行svn update进行更新速度也就越来越慢了，常常提交之后SVN客户端会等几分钟没有响应，在没有响应的时间内，无法再

svn

hooks

post-commit

转载精选 2013-09-11 11:00:21 6269 阅读

tcp链接的几种状态

说明：通常情况下:一个正常的TCP连接，都会有三个阶段:1、TCP三次握手;2、数据传送;3、TCP四次挥手里面的几个概念：SYN: (同步序列编号,Synchronize Sequence Numbers)ACK: (确认编号,Acknowledgement Number)FIN: (结束标志,FINish)TCP三次握手(创建 OPEN)客户端发起一个和服务创建TCP链接的请求，这里是SYN

tcp

状态

转载精选 2013-07-30 00:08:43 460 阅读

Puppet自动化Nginx+Mongrel负载均衡配置

前言 * 随着公司应用需求的增加，需要不断的扩展，服务器数量也随之增加，当服务器数量不断增加，我们会发现一台puppetmaster压力大，解析缓慢，那这时有什么优化的办法吗？答案是有滴！Puppet官网上有类似的解决方案，puppetmaster可以配置多端口，结合WEB代理，这样puppetmaster承受能力至少可以提升10倍以上。一、硬件环境:服务器系统：CentOS6.0 x86_64

服务器

客户机

服务端

puppet

转载精选 2013-07-22 23:44:09 502 阅读 1点赞

Puppet批量部署实际案例

前言 * 随着IT行业的迅猛发展，传统的运维方式靠大量人力比较吃力，近几年自动化运维管理快速的发展，得到了很多IT运维人员的青睐，一个完整的自动化运维包括系统安装、配置管理、服务监控三个方面。那今天咱们大家一起来学习一下puppet实际运维中的案例。仅供参考，欢迎大家提更多的意见！一、应用背景某公司新到500台服务器，需要安装Linux系统，并部署上线以及后期的管理配置。对于系统安装，这个时候肯定

服务器

客户机

服务端

puppet

转载精选 2013-07-22 23:40:42 482 阅读 1点赞

自动化运维管理平台-Puppet资源管理

服务器

客户机

服务端

puppet

转载精选 2013-07-22 23:38:26 336 阅读 1点赞

Puppet常用配置与管理

前言：对于上一篇文章，当我们安装完puppet后，才是刚刚开始，接下来我们要做的就是怎么来使用puppet管理和维护我们的批量服务器。我们也许会问，那使用puppet的时候需要注意哪些方面呢？平时需要配置什么呢？那接下来我们一起来学习。一、puppet自动认证：首先我们先来看一个问题，新服务器可以通过kickstart自动安装完，并且自动安装完puppet相关包，安装完后客户端会请求证书，然后服务

服务器

客户机

服务端

puppet

转载精选 2013-07-22 23:37:34 809 阅读 1点赞

Puppet客户端自动安装脚本

运维自动化发展已经是势不可挡，传统的靠大量人力运维的方式渐不能满足企业IT发展的需求，其中Puppet自动化更是受到IT人士的青睐，那今天我们一起来研究一下puppet客户端的自动安装脚本。脚本不足之处，欢迎指正，共同进步！背景：当我们需要使用puppet批量管理服务器时，首先需要指定FQDN名或者DNS解析，然后接下来就是批量安装puppet客户端了，怎样安装比较快呢？这里仅供参

服务器

客户机

服务端

puppet

转载精选 2013-07-22 23:35:53 713 阅读 1点赞

CentOS6.0 Puppet安装配置

前言：Puppet是Puppet Labs基于ruby语言开发的自动化系统配置工具，可以以C/S模式或独立模式运行，支持对所有UNIX及类UNIX系统的批量配置和管理，最新版本也开始支持对Windows操作系统有限的一些管理。Puppet适用于服务器管理的整个过程，比如初始安装、配置、更新以及系统下线。puppet原理：Puppet的工作细节分成如下几个步骤： 1、客户端puppetd

服务器

IP地址

客户机

服务端

puppet

转载精选 2013-07-22 23:31:53 340 阅读 1点赞

Zabbix 监控Mysql 主从状态的Python脚本

1、在被监控机（Mysql Slave端）放置检查脚本：/usr/local/zabbix/bin/check_mysql_repl.py#!/usr/bin/python#coding:utf-8import MySQLdb import sys class check_mysql_repl(): def __init__(self): self.dbhost = 'localhost&

Zabbix

Python脚本

Mysql主从状态

转载精选 2013-07-20 13:06:47 435 阅读

MySQL表结构同步

现在全身心投入到MySQL中。项目要求：将开发环境中的数据库的修改同步至线上环境。开发者给出的解决办法是：利用像Python 中的South框架，自动将开发环境的变更同步至生产环境。这个对于DBA来说是无法承受的（除非是创建数据库结果类似的语句）。数据库变更在生产环境执行，必须事先经过评估。对业务的影响降到最低，这个就设计到了重新设计索引

数据库

在线

评估

开发者

表同步

转载精选 2013-07-17 19:41:15 1590 阅读

MySQL日志分析工具

MySQL的性能从查看日志开始。硬件配置低常常导致这样的问题，但事实上大多数情况并不在这里。某些“慢"SQL阻塞了其他语句的执行，优化查询是第一步需要做的。 “工欲善其事必先利其器”，MySQL自身的一款mysqldumpslow 查询日志分析器，该工具不但陈旧，验证规范不准确。今天要说的是Percona 的工具pt-query-digest,它能够分析慢查询

mysql

日志分析

转载精选 2013-07-17 19:37:47 418 阅读

MySQL主从复制一致性检测

在MySQL主从复制过程中，常常需要对某些重要的表进行一致性检查。由于主从数据在同步时存在一定的延迟，因此直接读取服务器数据的方式无法严格保证信息的一致性。在数据在同步完全结束之前，一直处于不断变化且并不完整的状态下。锁表的可能实现这个问题，但是性能又是需要考虑的。能对数据验证是最好的。MySQL的CHECKSUM TABLE指令对于小型列表来说完全够用，但规模庞大的列

检测

规模

主从复制

一致性

转载精选 2013-07-17 19:35:00 612 阅读 1点赞

MySQL基准测试工具-mysqlslap

mysqlslap是MySQL5.1之后自带的benchmark基准测试工具,该工具可以模拟多个客户端同时并发的向服务器发出查询更新，给出了性能测试数据而且提供了多种引擎的性能比较。使用方式：--concurrency 并发数量（可逗号隔开），例如：concurrency=10,50,100 并发连接线程数是10,50,100--engine

客户端

write

连接线

mysqlslap

测试表

转载精选 2013-07-17 19:08:19 398 阅读

使用Python批量删除文件

已知要删除的文件列表，即确定哪些文件要删除。代码如下：#!/usr/bin/env python #coding=utf-8 #目的：本程序主要为删除给定的文件列表 import os import shutil #引入模块，os为包含普遍的操作系统功能；shutil为文件操作工具的模块 count_not_exist = 0 count_exist_but_dir = 0 cou

程序

操作系统

python

import

转载精选 2013-07-17 01:45:58 662 阅读 1点赞 1评论

python写的监控mysql主从的app

#!/usr/bin/env python # -*- coding: utf-8 -*- #File:repl_wx.py #creater:wangwei import MySQLdb import Queue,os,base64,time,sys,wx,threading import ConfigParser,logging from wx.lib.mixins.listct

mysql

监控

python

转载精选 2013-07-17 01:19:27 682 阅读

python写的简单发送邮件的脚本

近来有些东西需要监控报警发邮件，然后在网上找了点材料，自己写了一个简单发送邮件的脚本，主要就是运用python的smtplib模块，分享给大家看一下：#!/usr/bin/env python # -*- coding: utf-8 -*- #导入smtplib和MIMEText import smtplib,sys from email.mime.text import MIMEText

用户名

服务器

python

import

content

转载精选 2013-07-17 01:11:51 686 阅读 1点赞

python写的FTP简单上传下载文件

python本身自带一个FTP上传或下载模块，可以实现FTP上传或下载：#!/usr/bin/env python # -*- coding: utf-8 -*- from ftplib import FTP def ftp_up(filename = "20120904.rar"): ftp=FTP() ftp.set_debuglevel(2)#打开调试级别2，显示详

ftp服务器

下载文件

python

import

详细信息

转载精选 2013-07-17 01:08:27 498 阅读 1点赞

linux命令如何在python中运行

1234567891011121314151617#!/usr/bin/env pythonimportsubprocessdefls():ls ="ls"l ="-l"subprocess.call([ls,l])defroot_space():root_usage ="du"root_arg ="-h"path =

linux

python

如何

转载精选 2013-07-17 01:02:43 618 阅读

用python切割nginx日志脚本

1234567891011121314151617181920212223#!/usr/bin/env python#-*-coding:utf-8-*-#Python nginx cut logimportsubprocessdefmkdir():subprocess.call('mkdir -pv /usr/local/nginx/logs/$(date -d "yester

access

python

local

切割

yesterday

转载精选 2013-07-17 01:01:36 607 阅读

用python脚本查看系统基本信息

12345678910111213#!/usr/bin/env pythone#-*-coding:utf-8-*-importsubprocessprint"系统进程数："subprocess.call("ps -ef|wc -l",shell=True)print"磁盘使用情况："subprocess.call("df -T

信息

python

登录系统

用户数

转载精选 2013-07-17 01:00:20 565 阅读

用python备份mysql数据库的脚本

#!/usr/bin/env python #!/usr/bin/env python #-*-coding:utf-8-*- #MYSQL 备份脚本 importstring importtime importos data_path ="/data/" sql_user ="root" sql_pwd ="123456" sql_ip ="127.0.0.1" all="

mysql

python

数据库备份

转载精选 2013-07-17 00:58:51 410 阅读

python 基础操作知识整理总结

1. 数据对象持久化在某些时候，需要将数据对象的内容保存下来，方便下次程序启动时读取，这个就需要将对象持久化，请看如下例子 import pickle # create the test dictionary before_d = {} before_d[1]="Name 1" befo

protocol

python

create

dictionary

import

转载精选 2013-07-17 00:55:11 520 阅读

检查Linux系统日志error和mysql错误日志的脚本

对系统日志的检查和数据库日志的检查很重要，出现问题及时的通知系统管理员更为重要，本脚本用python写的监控脚本，主要是为zabbix监控自定义的key而准备的，当然大家也可以在返回值方面做修改，可以在写个发邮件的模块，做个定时，有问题自动发邮件（在之前写过一个发邮件的类，大家可以做参考：http://wangwei007.blog.51cto.com/68019/978743）。在zabbix中

服务器

数据库

系统管理员

error

python

转载精选 2013-07-17 00:53:29 780 阅读

Python中执行系统命令常见的几种方法

Python中执行系统命令常见的几种方法： (1)os.system # 仅仅在一个子终端运行系统命令，而不能获取命令执行后的返回信息 # 如果再命令行下执行，结果直接打印出来例如： >>> import os >>> os.system('ls') chk_err_log.py Cm

程序

信息

import

转载精选 2013-07-17 00:50:32 444 阅读

python中if name == "main"的解释

想必很多初次接触python的同学都会见到这样一个语句，if __name__ == "__main__"：那么这个语句到底是做什么用的呢？在解释之前，你一定要知道的是：1.python文件的后缀为.py；2..py文件既可以用来直接执行，也可以用来作为模块被导入3.在python中导入模块一般使用的是import，要导入你自己写的python脚本，如:aa.py 则直接用im

start

python

命名

import

做什么

转载精选 2013-07-17 00:47:54 332 阅读

python监控单台多实例数据库服务器的数据库端口

最近公司做数据库的单台服务器多实例，需要对各个数据库的进程进行监控，因为我们的资产数据库中已经有这个服务器跑多少个实例，端口是什么，用来做什么的，所以就拿资产数据库的端口和服务器本地运行的数据库端口进行对比，报出没有运行的mysql实例以及他的用途。一种方法是根据"ps auxww|grep mysqld|grep -v root|grep -v grep"这个命

服务器

center

python

import

连接数据库

转载精选 2013-07-17 00:45:13 321 阅读

Python中MySQLdb的connect的用法

MySQLdb模块是python连接mysql数据库的一个模块，在操作mysql数据库是经常使用，在连接数据库时connect是最常用的一种方法，这个方法有好多参数，总结了一下，主要有一下几种：connect()方法用于连接数据库，返回一个数据库连接对象。如果要连接一个位于www.gyyx.com服务器上名为mysql的MySQL数据库，连接串可以这样写：db = MySQLdb.connect(

用户名

python

数据库连接

localhost

连接数据库

转载精选 2013-07-17 00:43:45 601 阅读 1评论

python编程中常用的12种基础知识总结

python编程中常用的12种基础知识总结：正则表达式替换，遍历目录方法，列表按列排序、去重，字典排序，字典、列表、字符串互转，时间对象操作，命令行参数解析(getopt)，print 格式化输出，进制转换，Python调用系统命令或者脚本，Python 读写文件。1、正则表达式替换目标: 将字符串line中的 overview.gif 替换成其他字符串>>> line = &#

字符串

基础知识

python

表达式

转载精选 2013-07-17 00:41:59 194 阅读

字符串的截取和替换常用方法

一：字符串的截取python的字符串是有序集合，我们可以通过索引来提取想要获取的字符，可以把python的字符串也做为字符串的列表就更好理解python的字串列表有2种取值顺序：第一种是从左到右索引默认0开始的，最大范围是字符串长度少1s = 'ilovepython's[0]的结果是i第二种是从右到左索引默认-1开始的，最大范围是字符串开头s = 'ilovepython

字符串

python

转载精选 2013-07-17 00:40:37 316 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

无言的诗