wangganyu188的博客_前端开发,编程语言,运维基础原创

我的友情链接

51CTO博客开发峰云，就她了。灿哥的saltstack小蜗牛Vamei-pythondjango-comments实现叶落花开python 分词处理Genius-python分词旁观者-郑昀Python编程hadoop-ha qjm实践检验真理spark to hadoop部署chenzhijuntinytub 日志管理董的博客虾皮工作室牛shell大数据王家林

原创 2017-11-22 23:11:40 370 阅读

告别51cto　blog了,

　　　看到很多朋友都有了自己博客,我就跟风了,哈哈,　以后技术文档都会更新到 http://shantu.gitcafe.com/ 有需要的朋友,可以去看看,参考一下,哈哈

blog

朋友

技术

博客

原创 2014-10-14 18:06:21 4571 阅读

python 函数库妙用 range xrange

range 和　xrange 使用区别range 函数说明：range([start,] stop[, step])，根据start与stop指定的范围以及step设定的步长，生成一个序列。range示例: >>> range(5) [0, 1, 2, 3

python

range

原创 2014-09-16 18:18:36 1274 阅读

python小程序: 剪子，石头，布

　　闲来无事，写一个小程序，练习一下python，哈哈：　#!/usr/bin/env python#coding:utf8#author : wangganyu188@163.com#date : 2014-09-11import random,sys#定义石头剪子布字典dict = { 1:'剪子', 2:'石头', 3:'布', }for row in dict: print '编号:',r

python

小程序

原创 2014-09-15 10:10:24 627 阅读

2014年努力的学习

　2014年过去大半了，发现自己还有好多东西需要学习，着急啊，虽然一部分已经完成，部分还在努力中，贴出下图，好好警示一下自己，记得有人说过：　如果不对自己狠一点，永远不知道自己有多牛逼，哈哈，

学习

原创 2014-09-12 15:57:12 328 阅读

python 分析处理nginx日志

　　　临时帮公司研发同事处理nginx日志，凑合了一个脚本，用着还行，执行效率，还可以吧，一个G的文件，一分钟内就可以处理完成，供大家参考。#!/usr/bin/env pythonimport osimport reimport fileinputlogfile = r"/data/log20140904/nginx/192.168.1.50"#定义正则匹配变量ip = r"?P<ip&g

log

nginx

原创 2014-09-09 17:14:01 1051 阅读

python 远程执行命令、发布文件

　　最近有个需求，想获取部分服务器上运行了那些应用服务，一台台去看，太费劲了，参考牛人写了此脚本，后期再加上一个前端页面做一些简单的运维维护的工作，凑合着先用着，待完善，注：此脚本依懒于安装fabric ，安装过程参考：　http://5973819.blog.51cto.com/5963819/1532334#!/usr/bin/env pytho

python

发布任务

原创 2014-09-05 12:33:43 699 阅读

python smtplib　发送邮件

SMTP是发送邮件的协议，Python内置对SMTP的支持，可以发送纯文本邮件、HTML邮件以及带附件的邮件。Python对SMTP支持有smtplib和email两个模块，email负责构造邮件，smtplib负责发送邮件。学习了一下，以后也许用得着！！#!/usr/bin/env python#coding:utf8from email import encodersfrom email.he

python

smtplib

原创 2014-08-26 17:18:59 547 阅读

python 分布式进程体验

　　抽了点时间体验了一把python　分布式进程，有点像分布式计算的意思，不过我现在还没有这个需求，先把简单体验的脚本发出来，供路过的各位高手指教注：需要先下载multiprocessing 的python包支持才行。管理端：cat task_manager.py　　#!/usr/bin/env python#coding:utf8import random,time,Queue,js

python

multiprocess

原创 2014-08-21 16:51:44 1074 阅读

成长点滴：我不知道该说些什么？

家里有点事，最近回了趟家，火车上也不知道什么情况，人好像不比春运时候少，刚开始邻座之间还闲聊几句，慢慢到了深夜，都疲倦的不行了，摆着各种不舒服的让自己稍微舒服的姿势睡着了，依窗打呼噜的，趴桌子流鼾喇子的，躺在座椅底下、过道里，摆的四平八歪！脱了鞋臭味搅和着方便面味，哎呀，这可能就是纯百姓的生活旅途吧！拖着疲惫不坎的身子终于熬到了西安，我走了，你们继续，呵呵！

成长

原创 2014-08-21 10:19:04 423 阅读

fabric 安装方法

在我的github https://github.com/wangganyu188 上fork了别人的fabric 安装包，我的测试虚拟机是centos 6.2 64位的，安装过程如下： &nbs

fabric

原创 2014-07-29 16:25:50 929 阅读

hadoop-ha QJM 架构部署

公司之前老的hadoop集群namenode有单点风险，最近学习此链接http://www.binospace.com/index.php/hdfs-ha-quorum-journal-manager/ 牛人上的hadoop高可用部署，受益非浅，自己搞了一个和自己集群比较匹配的部署逻辑图，供要用hadoop的兄弟们使用，如下图：部署过程，有时间整理完了，给兄弟

hadoop

原创 2014-07-29 14:42:16 1641 阅读

老婆！辛苦了

写码无绪，听，琴曲悠扬，满心感慨！随手点开了老婆和儿子的照片，一张张翻，一幕幕念想，突然有种无名愧疚，儿子一天天长大了，老婆却一天天消瘦了，发迹稀薄了，看到最后，偶尔也能看见眼角有微微角纹，或许是儿子的可爱乐着她了，又或许她一个人

老婆辛苦了

原创 2014-07-29 10:10:01 532 阅读

fabric自动化运维应用

　　最近看了一个fabric，果然是好东西，突然想利用fabric做一个代码版半自动化的运维管理程序，很想全自动化，可是本人前端太菜了，要花大把时间去搞前端，实在没时间，哎，只能简单用python先写一个自己玩一下，感觉一下，　　　逻辑架构如下：　　　　　　刚学python，不熟先写着玩一下，如有问题还望路过的高手，指教一下，写完后会把源码上传到github上，供大家参考。待续。。。。

自动化运维

fabric

原创 2014-07-28 17:16:44 696 阅读 1评论

运维日志管理系统

因公司数据安全和分析的需要，故调研了一下　GlusterFS + lagstash + elasticsearch + kibana 3 + redis　整合在一起的日志管理应用：安装，配置过程，使用情况等续一，glusterfs分布式文件系统部署：说明：公司想做网站业务日志及系统日志统一收集和管理，经过对mfs, fastdfs 等分布式文件系统的调研，最后选择

日志

原创 2014-07-18 17:41:36 3942 阅读 1点赞 1收藏 1评论

日志分析

为了对每个月的切割过的３０个日志文件统计出访问最多的ip地址进行排序，整理了下面的脚本，主要思路是处理每一个日志文件的ip排序，最后进行字典合并，计算出月ip排序。#!/usr/bin/env pythonimport osimport sysimport commandsimport reipsort = {}def IpSort(logfile):ipadd = r'\.'.join([r'\

日志分析

log

原创 2014-07-17 15:57:47 395 阅读

impala 1.1版本不稳定，监控脚本

#!/usr/bin/env pythonimport commandsimport timemonitor_host = ['dn1.h.cc.com','dn2.h.cc.com','dn3.h.cc.com',]status_dic = {}def monitor_cmd():for h in monitor_host:print “########################## %s

监控

start

原创 2014-07-16 22:49:35 692 阅读

python 日期时间处理

# 获取日期：import　datetime #调用事件模块today =datetime.date.today() #获取今天日期deltadays =datetime.timedelta(days=1) #确定日期差额，如前天 days=2yesterday =today -deltadays # 获取差额日期，昨天tomorrow =today +dletadays # 获取差额日期，明天#

python

import

原创 2014-07-16 22:46:33 575 阅读

应用日志切割

#!/usr/bin/env python#coding:utf8#author: wangganyu#des : 日志切割脚本import osimport globimport timeimport shutilimport datetimeimport commands#日志路径:logdir = ‘/data/application’scriptlog = os.popen(“pwd”).

file

python

import

切割

原创 2014-07-16 22:44:21 505 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

知易行难大道至简