rfyiamcool的博客_Mysql,Oracle,数据库,Linux,Nginx,shell,虚拟化,web相关,CDN缓存,负载均衡

关于ansible基础入门和功能实现教程的更新页面

前言：会把自己在ansible遇到的一些问题，总结在这个页面上。问题会持续不断的更新。现在有不少人在问我，怎么转到ansible来了，ansible和saltstack的优缺点，我这里就不在阐述了。因为总是叨叨这些没啥意思。我还是很看好saltstack以后的发展的，除了shell，老一代的运维牛人更喜欢用perl，而且这几年

ansible 文档

ansible 教程

anisble

置顶原创点赞10 阅读10000+ 收藏2 评论10 2014-05-31

关于运维自动化工具saltstack的教程更新页面

saltstack的稳当写了不少，但是有点乱，现在把saltstack的教程归类在一起，方便大家查看，也方便自己！自己写的教程，更像是一个个的实例，而不是每个功能及模块的使用说明，后期再写的时候，一定改进下！正在进行的！运维平台化saltstack和jinja2模板构建高可用集群配置平台http://rfyiamcool.blog.51cto.com/1030776/1351068用sal

saltsatck

saltstack pdf

saltstack 教程

saltstack 入门

置顶原创点赞20 阅读10000+ 收藏1 评论13 2014-02-10

运维线下沙龙(北京站)-漫谈构建运维平台化

2014运维线下沙龙（北京站），有兴趣的朋友可以来参加，涉及的内容是运维开发和云端运维相关。这次分享会规模也不大，大家可以开开心心的各种闲聊。详情地址及报名地址:http://xiaorui.cc/?p=611我主要讲运维平台自动化相关的 1. 运维自动化的构成（系统交互，流程流转，api化） 2. 运维平台化的构成（cmdb，b

运维平台化

运维线下沙龙

原创点赞2 阅读4795 收藏0 评论5 2014-11-25

运维架构图之用前端简易实现集群框架图

前言：今个群里有个哥们问我怎么实现一个集群的架构图，一说架构图，大家肯定想到的是用visio或者是亿图，但是动态的咋办？甚至说高端了点，不仅可以看到架构图，而且可以看到流量及负载的信息。　现在运维平台这么火热，大家恨不得把平台做全面点。　我以前做过一个机房展现图，有兴趣的朋友可以再以前的博客中找到。　运维平台化之IDC机柜拓扑及数据展现实现思路http://rfyiam

运维架构图

运维框架图

集群架构图

原创推荐点赞3 阅读10000+ 收藏0 评论3 2014-09-28

使用python的分布式任务队列huey实现任务的异步化

huey

python huey

python 任务队列

python celery

翻译点赞4 阅读10000+ 收藏0 评论6 2014-09-08

关于python multiprocessing进程通信的pipe和queue方式

这两天温故了python 的multiprocessing多进程模块，看到的pipe和queue这两种ipc方式，啥事ipc？ ipc就是进程间的通信模式，常用的一半是socke，rpc，pipe和消息队列等。今个就再把pipe和queue搞搞。#coding:utf-8 import multiprocessing import time def pr

python multiprocessi

python pipe

原创推荐点赞3 阅读10000+ 收藏0 评论3 2014-09-08

python使用异步任务celery出现异常崩溃时retry重试

文章源地址，http://xiaorui.cc/?p=254

celery 异常

celery retry

python celery

原创推荐点赞4 阅读8144 收藏0 评论4 2014-09-02

使用Docker和saltstack构建运维paas管理平台

扯淡开始: 最近有些忙，换了份差事，开始做纯开发了。但是还放不下运维的那些东西。现在的运维朋友最常说的可能就是运维自动化了，刚培训出来的小孩，也是满口的自动化管理，让你听的发蒙。呵呵！只是有些时候环境的部署虽然有自动化的脚本定制，但是还是会耗时间，运气差了会安不上。现有不少公司学的聪明了，针对一些

saltstack docker

docker 运维

运维paas

原创点赞9 阅读10000+ 收藏0 评论6 2014-08-23

用dockerfile配置生成docker image并实现容器部署

前言： docker有个dockerfile 是什么东西，为什么我们要用他？简单的说：以前咱们docker run创建一个docker容器，有时候会附带不少的参数。比如:docker run -d -p 22 -p 8080:8080 ru

docker dockerfile

dockerfile

docker 部署

原创推荐点赞4 阅读10000+ 收藏0 评论5 2014-08-16

docker容器跨服务器的迁移方式export和save

原文在 xiaorui.cc

docker 备份

docker save

docker 迁移

原创推荐点赞4 阅读9210 收藏0 评论8 2014-08-15

使Docker提供对外服务的网络配置(桥接与端口)

前沿： docker 启动容器后，如何对外服务？希望大家看了这篇文章后有些帮助。 docker的有关网络问题没怎么搞清楚，请教了下邓磊同学，感谢！Docker生成的容器，一般会给你生成一个ip地址，这个ip地址是和docker0的地址是一个ip段的。通过ip a命令，咱们可以

docker 网络

docker 桥接

docker 网卡

原创点赞6 阅读10000+ 收藏0 评论7 2014-08-14

关于docker rest api接口组件docker remote api的使用

前提： docker remote api 是docker自带的一个rest api 管理。只要在配置文件里面申明下就可以了。下面是docker remote api的官方的功能目录：Docker Remote API v1.33.1 Inside ‘docker run’3.2 Hijacking3.3 CORS Re

docker api

docker remote api

原创推荐点赞5 阅读10000+ 收藏0 评论3 2014-08-13

使用python的docker-py实现docker的api操作

前沿：听同事说，以后的dba申请可能有部分走其他部门的docker ，那边貌似在搞一个类似docker的平台管理系统，据说很霸道。于是乎，我自己也想尝试写一个简单的doker管理平台。做为起步我先搞搞docker api，docker官网有个docker-py，用起来很是清爽简单。有关docker的更多的文章，大家可

dcoker api

python docker

docker-py

原创推荐点赞5 阅读10000+ 收藏0 评论7 2014-08-13

关于gevent的协程间通信及队列和事件event用法

前言：今天就写点gevent的高级点的用法，对于我来说这些也是常用的gevent模块。gevent的AsyncResutl模块的用途，看字眼的意思是一个异步的任务的结果。其实官方的说法也让人有些发蒙。其实说白了就是协程间的通信，我是老板，让大哥和小弟同事去收账，小弟做完了后，会等大哥来问话。如果小弟没有完成，还在做着事情，那大哥会

gevent queue

gevent event

gevent 事件

原创推荐点赞4 阅读10000+ 收藏0 评论4 2014-08-10

hbase之python利用thrift操作hbase数据和shell操作

前沿：以前都是用mongodb的，但是量大了，mongodb显得不那么靠谱，改成hbase撑起一个量级。HBase是Apache Hadoop的数据库，能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的，分布式的，多版本的，面向列的存储模型。它存储的是松散型数据。HBase提供了丰富的访问接

python thrift

hbase thrift

原创点赞5 阅读7646 收藏0 评论3 2014-08-08

小计使用多线程和gevent来提高celery性能及稳定性

前言：有朋友问我，我那个任务队列是怎么实现，他的疑问其实主要是celery不支持多线程。先说说我那实现的方法，其实我的做法和celery、rq这样的框架很像的，都是把任务push到队列里面，然后pull取出任务而已，celery里面还可以取任务，我这个是通过传送uuid来实现的。朋友问celery不支持多线程，那是他没有好好看文档。cele

python celery

celery rabbitmq

celery 多线程

原创推荐点赞5 阅读10000+ 收藏1 评论4 2014-07-27

ansible自定义lookup_plugins插件实现playbook扩展

前沿： ansible的那几个插件都不错，现在咱们聊聊lookup plugins这个插件。 Lookup_plugins主要是用来实现扩展playbook里面各种的字符串和变量的扩展。对于我个人来说，用途不是太大，但是看了下官方提供的lookup_plugins的扩展列表，还是有些想法的。一开始使用lookup的时，遇到了一个问题，` lookup `里面

ansible lookup_plugi

ansible lookup

ansible 插件

原创点赞5 阅读4885 收藏0 评论6 2014-07-22

ansible filter_plugins插件实现jinja2自定义filter过滤器

前言： filter_plugins是什么？这个单词拆解下，filter ！熟悉jinja2模板的人，到知道他是过滤器，可以在模板中以管道的方式用pyhton的代码处理字符串。　ansible模板调用的是jinja2，这个大家都知道。这个filter_plugins插件代码，就是为了更好的处理jinja2模板中的字符串和逻辑判断的。先前，我和沈灿讨论一

ansible template

ansible jinja2

ansible Filter Plugi

原创点赞5 阅读5801 收藏0 评论5 2014-07-21

ansible调用callbacks插件实现结果nosql输出回调

前言： ansible的结果默认是输出到cli终端和日志里面的，用惯了saltsatck的returners数据回调后，也很是喜欢ansible也有，一开始不知道有这个功能，自己也简单实现了这样的功能。我的实现方式是，在模块里面做一些输出的逻辑。当使用ansible runner api的时候，是在后面runner代码，最后加了一段往redis输出的逻

ansible callbacks

ansible plugins

asnible callbacks pl

原创推荐点赞4 阅读10000+ 收藏1 评论7 2014-07-20

聊聊Python用rpc实现分布式系统调用的那些事

通俗的讲rpc是什么？rpc 一般俗称，远程过程调用，把本地的函数，放到远端去调用。通常我们调用一个方法，譬如: sumadd(10, 20)，sumadd方法的具体实现要么是用户自己定义，要么存在于该语言的库函数中，也就说在sumadd方法的代码实现在本地，它是一个本地调用！“远程调用”意思就是：被调用方法的具体实现不在程序运行本地，而是在别的某个地方（分布到各个服务器），但是用起来像是在本地。

xml

rpc

python

原创推荐点赞5 阅读8511 收藏1 评论5 2014-07-18

监控报警开发之zabbix语音电话报警方案联想

文章已经转到 http://xiaorui.cc 个人博客里，欢迎浏览 !!!交流Python & Golang 可以加群 278517979 .

zabbix 语音

语音报警

pagerduty

zabbix 自动语音

原创推荐点赞9 阅读8333 收藏1 评论4 2014-07-15

使用monit规范的扩展业务的进程监控和管理

前言：看到这个标题的人一定会很疑惑，进程监控和报警，不都是用zabbix，nagios么？对于管理的话，自己写crontab脚本不就行了。当然这肯定是可以的。标题说了，规范和扩展！所谓的进程监控就是在进程不可用，或者是被kill掉，也有外因，比如进程吃内存大，需要重启进程，让他初始化程序的实例，简单说，就是进程pid是在，

monit

supervisord

god监控

god monit

原创推荐点赞9 阅读3058 收藏0 评论9 2014-07-13

测试批量管理推送linux命令工具mussh和pssh

文章已经转到 http://xiaorui.cc 个人博客里，欢迎浏览 !!!交流Python & Golang 可以加群 278517979 .

pssh

pdsh

mussh

批量linux命令

原创点赞6 阅读2522 收藏1 评论8 2014-07-09

Python运维项目中用到的redis经验及数据类型

先感叹下，学东西一定要活学活用！我用redis也有几年的历史了，今个才想到把集合可以当python list用。最近做了几个项目都掺杂了redis，遇到了一些个问题和开发中提高性能的方法，这都分享出来，共同学习。下面先简单讲讲Redis集合的数据类型。Sets 就是一个集合，集合的概念就是一堆不重复值的组合。利用Redis提供的Sets数据结构，可以存储一些集合性的

python redis

redis 多线程

redis sadd

gevent redis

原创推荐点赞10 阅读3939 收藏1 评论7 2014-07-08

关于saltstack mine自定义收集minion状态及应用场景

这两天有人问我saltstack 关于mine的主要应用场景和具体的用法，我翻了下自己一些写的关于saltstack的博客，还真没有mine的文章。。。现在总结下mine的文档，供大家拍砖。mine是做什么？就是你在mine定义了收集模块，他自己会把数据收集的，存到了哪里，不知道，但是肯定是客户端minino本地。有兴趣的朋友可以check saltstack的代码。这里先粘贴下

saltstack mine

salt mine

saltstact mine grain

saltstack pillar

原创推荐点赞6 阅读6205 收藏1 评论5 2014-07-03

临时数据库之python用sqlite3模块操作sqlite

SQLite是一个包含在C库中的轻量级数据库。它并不需要独立的维护进程，并且允许使用非标准变体(nonstandard variant)的SQL查询语句来访问数据库。一些应用可是使用SQLite保存内部数据。它也可以在构建应用原型的时候使用，以便于以后转移到更大型的数据库。SQLite的主要优点：1. 一致性的文件格式：在SQLite的官方文档中是这样解释的，我们不要将SQLite与Oracle或

python sqlite

python sqlite3

python 数据库

原创推荐点赞5 阅读2764 收藏1 评论4 2014-07-01

自动化部署关于在ubuntu下的docker容器折腾小记

文章已经转到 http://xiaorui.cc 个人博客里，欢迎浏览 !!!交流Python & Golang 可以加群 278517979 .

docker 文档

ubuntu14.04 docker

ubuntu docker

原创点赞2 阅读2542 收藏1 评论2 2014-06-28

监控开发之用python扩展dstat插件自定义实时监控

dstat是一个python开源的实时监控工具，一般是用来做系统性能监控的。咱们这里只是提他的自定义插件开发，用来打造自己的dstat。有朋友可能还没清楚是什么意思，咱们查看系统的状体状态有人喜欢用vmstat，也有人喜欢用dstat。相比来说dstat的功能模

开发

dstat

监控开发

原创推荐点赞3 阅读3181 收藏1 评论6 2014-06-26

监控开发之如何开发简单高性能扩展性强的监控系统

记得刚入行的时候，对于监控方面，用的是nagios和cacti，现在大多数中小公司好多都开始搞zabbix了，熟悉zabbix的人，知道他的性能的瓶颈其实主要还是在数据库上，尤其是zabbx_server 针对数据库一些不高效逻辑的查询和写入引起的。同事针对zabbix开发也搞了半年了，和他

监控开发

开发运维监控

运维监控平台

原创推荐点赞12 阅读5764 收藏1 评论8 2014-06-23

关于数据库自动化运维平台的设计及开发实现思路

今个讲解下，个人对于数据库运维自动化平台的理解，话说这个项目和我以前做的lvs集群平台一样，都是分成两个主要的角色，一个是对于普通用户的申请及权限内的执行，还有一个是对于dba的审核及相关的日常dba数据库操作。DBA其实也是很苦逼的，再高端的dba也是由苦逼开始的。如果你是苦逼的dba，那更要往下看了。因为工位紧张的缘故，我现在和一排的dba做在一起，见到了他们的高端，也见到了他们的苦逼。工作期

数据库自动化运维

dba 运维平台

mysql 运维平台

原创推荐点赞15 阅读10000+ 收藏0 评论18 2014-06-20

官方博客	意见反馈	了解我们	全部文章
在线客服	网站地图	热门标签

51CTO博客

峰云，就她了。

关于ansible基础入门和功能实现教程的更新页面

关于运维自动化工具saltstack的教程更新页面

运维线下沙龙(北京站)-漫谈构建运维平台化

运维架构图之用前端简易实现集群框架图

使用python的分布式任务队列huey实现任务的异步化

关于python multiprocessing进程通信的pipe和queue方式

python使用异步任务celery出现异常崩溃时retry重试

使用Docker和saltstack构建运维paas管理平台

用dockerfile配置生成docker image并实现容器部署

docker容器跨服务器的迁移方式export和save

使Docker提供对外服务的网络配置(桥接与端口)

关于docker rest api接口组件docker remote api的使用

使用python的docker-py实现docker的api操作

关于gevent的协程间通信及队列和事件event用法

hbase之python利用thrift操作hbase数据和shell操作

小计使用多线程和gevent来提高celery性能及稳定性

ansible自定义lookup_plugins插件实现playbook扩展

ansible filter_plugins插件实现jinja2自定义filter过滤器

ansible调用callbacks插件实现结果nosql输出回调

聊聊Python用rpc实现分布式系统调用的那些事

监控报警开发之zabbix语音电话报警方案联想

使用monit规范的扩展业务的进程监控和管理

测试批量管理推送linux命令工具mussh和pssh

Python运维项目中用到的redis经验及数据类型

关于saltstack mine自定义收集minion状态及应用场景

临时数据库之python用sqlite3模块操作sqlite

自动化部署关于在ubuntu下的docker容器折腾小记

监控开发之用python扩展dstat插件自定义实时监控

监控开发之如何开发简单高性能扩展性强的监控系统

关于数据库自动化运维平台的设计及开发实现思路