lixiaocheng18的博客_Web开发,python,Mysql,Linux,负载均衡,集群,虚拟化,服务器,云计算,saltstack,命令工具,debian

linux下网络流量监控工具

今天QA同学让我协助检测下一台服务器的网络流量。没干过这活，在网上随便找了个命令。后来，发现是不对的，为了以后不出丑，决定收集下网络流量监测相关的工具。查看某个网卡收发数据的总量方法一方法二2.查看网卡的实时的流量工具一网上找到的一个脚本，基本上来说是处理ifconfig的结果，得到单位时间内的流量。也可以通过处理/pro

网络

linux

服务器

检测

流量监控

原创推荐 2014-11-07 15:34:07 5061 阅读

arping详解

最近检测内网机器的ip占用问题，用到了arping，总结一下。版本 arping主要干的活就是查看ip的MAC地址及IP占用的问题。 arping有两个版本，一个版本是Thomas Habets这个人写的，这个版本有个好处是可以arping <MAC地址>，也就是说我们可以通过

Linux

IP地址

操作系统

检测

网上

原创 2014-11-04 20:32:10 10000+阅读 1收藏

KVM（二）桥接网络

上一篇把虚拟机安装好了，这一篇配置配置网络一.KVM网络模式KVM支持4种网络模式，和Vmware差不多桥接模式NAT模式QEMU内置的用户模式直接分配网络设备的网络桥接，NAT是基于linux-bridge实现的软件虚拟网络，QEMU是QEMU软件虚拟的网络。第四种模式是直接把我们的物理网卡分配给虚拟机使用，比方说我们有eth0,eth1两块网卡，直接把eth0这块网卡给某一虚拟机使用。二.桥接

网桥

network

虚拟机

address

manual

原创 2014-10-23 15:31:22 10000+阅读

KVM(一)安装篇

最近研究了OpenStack，不可避免的用到了KVM，先总结下对KVM的学习。一.KVM原理 KVM是在x86平台上面实现的一种全虚拟化的方案，下面的这个图是我从网上抄来的。基本上可以说明KVM的结构。 &nb

软件

linux

虚拟机

操作系统

监视器

原创 2014-10-23 13:44:24 3876 阅读 2收藏

supervisor(三)xml_rpc

supervisor提供的两种管理方式，supervisorctl和web其实都是通过xml_rpc来实现的。xml_rpc其实就是本地可以去调用远端的函数方法，然后函数方法经过一番处理后，把结果返回给我们。xml_rpc不懂的同学建议去百度百度它的原理机制。这个比较简单，楼主也是上午刚搞懂。在python里面实现xml_rpc就更加的简单，

python

import

localhost

服务端

原创精选 2014-08-15 19:38:45 10000+阅读 2点赞 2收藏 1评论

supervisor(二)event

supervisor的event机制其实，就是一个监控/通知的框架。抛开这个机制实现的过程来说的话，event其实就是一串数据，这串数据里面有head和body两部分。咱们先弄清楚event数据结构，咱们才能做后续的处理。先看看header长啥样的吧ver:3.0 server:supervisor serial:21 pool:liste

server

监控

序列号

listener

原创精选 2014-08-14 21:06:02 10000+阅读 1点赞 1收藏

supervisor(一)基础篇

有阵子没写博客了，这段时间一直在研究python django框架和前端相关的东西。楼主学通信的，对web这一块啥也不懂，学了一个礼拜django，接着学了2个礼拜前端，感觉还是做不出来一个好看的页面。周末去了趟上海，蹭大神的讲课，学会了套用bootstrap框架和heighcharts，页面上也终于出来能看的东西了，也算是在web开发方面迈出了阶段性的一步。

服务器

web开发

python

listener

内测游戏

原创精选 2014-08-12 21:11:38 10000+阅读 20点赞 12收藏 5评论

grep详解

OK,学完了正则表达式，sed，awk，文本三剑客就剩下grep了。一块拿下吧先看看什么是grep吧百度了一下英文：global search regular expression(RE) and print out the line汉语：全面搜索正则表达式并把行打印出来grep是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。grep家族包括，grep，egrep和fg

详解

grep

原创精选 2014-07-18 20:36:48 5492 阅读

awk（四）高级篇

前面三篇总结了awk的基本结构，常用系统变量，流程控制，和函数。这一篇总结下awk剩余的一些话题。getline函数getline函数是从输入，标准输入，文件或管道读取另一行getline和next有点类似，它俩都导致下一个输入行被读取。不同的，next语句将控制返回到脚本的顶部。而getline得到新的一行，但没有改变脚本的控制。next类似于sed中命令d。而getline函数则类

管道

换行符

master

原创精选 2014-07-17 15:21:38 4194 阅读

awk（三）函数

函数是一个独立计算的过程，它接收一些参数并返回一些值awk有很多内置函数，分为：算术函数和字符串函数算术函数cos(x)返回x的余弦(x为弧度)exp(x)返回e的x次幂int(x)返回x的整数部分的值log(x)返回x的自然对数(以e为底)sin(x)返回x的正弦(x为弧度)sqrt(x)返回xatan2(y,x)返回y/x的反正切，其值在-180度到180度之间rand()返回随机数r,其中0

函数

字符串

awk

原创精选 2014-07-16 13:31:54 1838 阅读

awk（二）流程控制，数组

awk的流程控制，函数这一块，楼主以前没玩过，今天看了下，确实很有用。看了一下awk的条件判断和循环和C语言的差不多，在这里就简单的mark下条件判断格式if (expression){ action . .}else if (expression){ action . .

C语言

action

表达式

expression

原创精选 2014-07-15 17:00:24 2747 阅读

awk（一）基础篇

上一篇总结了下sed的用法，这一篇玩玩sed的好基友awk，学完它俩，以后就再也不用怕处理文本文件了。awk其实和sed处理过程差不多，都是面向字符流的。sed和awk都相当于是一个加工厂，输入的文本行，相当于原材料，原材料在工厂中经过一系列处理。然后输出成品。awk和sed不同的是，awk更加的强大了，基本上可以说大多数sed能够实现的功能，awk都可以实现。。。。但是实现相同的功能，大多情况下

file

文本文件

原材料

加工厂

原创 2014-07-14 20:10:00 1570 阅读

sed（二）高级部分

原文是这么说的：一旦你理解了这里所给出的命令，那么就可以认为自己是真正的sed主人了为了成为sed的主人，大伙一起努力吧sed高级命令分为三块处理多模式空间（N,D，P）采用保持空间来保持模式空间的内容并使它可用于后续的命令(H,h,G,g,x)编写使用分支和条件指令的脚本来更改控制了(:,b,t)咱们先温习下，基础部分，sed的处理过程吧通常来说，一行被读进模式空间，并且用脚本中的每个命令(一个

空间

sed

原创精选 2014-07-09 21:09:43 10000+阅读 2点赞 1评论

sed(一)初级篇

这两天看了下《sed与awk》中的sed部分,感觉很强大，装备库里面又多了件顺手的武器。sed按照工作场景来分，可以分为单模式空间和多模式空间单行模式空间——一次只处理一行输入多行模式空间——可以处理多行输入这一篇咱们先总结一下简单的，多行模式空间留到下一篇再总结一.概念sed是一个非交互式面向字节流的编辑器，输入为文件或stdin,输出为stdout或文件二.工作原理举个例子吧。sed可以比作为

sed

原材料

原创 2014-07-08 21:31:28 10000+阅读 1收藏

ansible（八）API，自定义module，自定义plugin

今天看了下ansible的API，楼主一看，这玩意牛逼啊，估计ansible Tower也是根据这套API来的吧。闲话不说，看看咋玩的吧。咱们先看看接口的主角，ansible.runner.Runner这个类吧想必大伙也也都看到了，这个类初始化函数里面的这些参数，就是咱们要输入的参数，不过全都有默认值，看到了没，也就是说咱们只要修改我们需要改变的就OK了。我们想要调用这个接口，其实很

接口

result

干什么

原创精选 2014-07-04 18:24:50 10000+阅读 2点赞 1收藏 2评论

ansible（七）Conditionals 和 loops，自定义loops插件

ansible的Conditionals 和 loops 和salt-stack比起来真的太强大了。 salt-stack使用判断循环，好像，只能使用模板里面的判断和循环。而ansible本身自带了适用于各种场景的判断循环插件。。不但如此，像loops，我们还可以自己编写插件，满足我们的实际需求。先说说Conditionals吧Conditionals相对loops来说，简单，就一

字符串

关键字

元素

程序语言

原创 2014-07-03 17:26:45 4588 阅读 2点赞 1收藏

正则表达式

接触UNIX正则表达式，也差不多有年把时间了，但是一直不是很清晰，正则表达式确切的含义。趁着现在拿着工资，不干实事的机会，把正则表达式总结一下吧。下面这个图是楼主看《sed与awk第二版》这本书，从里面抄下来的。楼主把内容画成了思维导图，看起来方便点。下面这幅图，主要描述了正则表达式的概念，匹配过程的理解，基本元字符及扩展元字符等内容。其实理解起来，正则表达式，是个啥东西呢？说白了，正则表达式就

python

团队协作

思维导图

原创精选 2014-07-03 14:37:07 1408 阅读 1点赞 3收藏 1评论

ansible（六）variables(二)使用

上一篇，咱们总结了下，ansible里的variables，这东西是从哪里来的。楼主举的例子可能都比较白痴，不过重在说明原理和过程，大伙有实际需求的时候，可以弄点高深的玩玩。说过了，variables来自哪里，那variables该咋用呢？说起用，用可以简单的用，也可以复杂的用，简单的用variables，直接`variable`这样用俩大括号括起来就OK了。高深的用，就要运用的更加灵活，可以对变

failed

filter

success

原创 2014-07-01 20:15:15 3481 阅读 1点赞 2收藏 1评论

ansible（五）variables(一)定义

说起变量，ansible中的变量，差不多等于salt-stack里面的pillar+grains吧ansible中的变量主要来源于，楼主总结了一下，大概有这么几个地方吧Inventory(host vars,group vars)playbook里面命令行playbook执行task过程中产生结果，可以register起来，作为变量给下面的task使用roles里面来自于nodes上面的facts

用户

variables

ansible

原创精选 2014-07-01 16:44:32 10000+阅读 1点赞 1收藏 1评论

ansible（四）roles

roles类似于salt-stack里面的state，state有一定的组织结构。而roles则是ansible中，playbooks的目录组织结构。这么划分有啥好处呢？好处多了去了，如果把所有的东西都写到playbooks里面的话，可能会导致我们这个playbooks很臃肿，不宜读。而模块化之后，成为roles的组织结构，易读，代码可重用，层次清晰方面贡献等等好处。来看一下，楼主弄的一个小的目录

主机

文件夹

信息

原创 2014-06-30 21:42:24 10000+阅读 4点赞 3收藏 2评论

ansible（三）playbooks初体验

先说说playbooks是什么吧？翻译成中文叫剧本，剧本是干嘛的？想必大伙都知道，剧本是咱们演电影，演电视剧的时候，大伙都要根据剧本来，然后把电影，电视剧给演好。OK，ansible里的playbooks其实和salt-stack里面的state差不多，都是在管理端定义好的一条条的策略。那这个策略是干啥用的呢？策略是想要让我们远端的机器达到一种什么样的状态，比如说咱们刚装好的一台机器上，啥都没有。

mysql

客户端

中文

电视剧

原创精选 2014-06-30 16:12:21 10000+阅读 3点赞 3收藏 3评论

ansible（二）基础篇

这篇总结一下Inventory，变量，目标匹配，及/usr/bin/ansible 命令行常用的模块上一篇也说过Inventory的默认路径是在/etc/ansible/hosts，当然这个东西可以说是静态的，为啥是静态呢，你要手工的把你的要管理的主机写进去。当然还有一种动态的Inventory，这个其实也简单，就是如果你已经有了一个资源管理系统，里面有你们的所有主机信息。然后咱们写个脚本程序，把

程序

管理系统

信息

动态

手工

原创 2014-06-27 16:05:51 10000+阅读 5点赞 6收藏 6评论

ansible（一）安装篇

研究了一个多礼拜saltstack，这东西除了偶尔不稳定之外，感觉啥活都能干。楼主，趁着没事，再研究下ansible吧。打开ansible官网，两行文字映入眼帘。Ansible is the simplest way to automate IT.意思是ansible是IT管理最简单的方法，简单归简单，不知道干的活有没有saltstack多了？。下面就开始楼主的ansible之旅了。an

客户端

安全性

开发者

中国式英语

原创 2014-06-26 16:35:07 10000+阅读 5点赞 7收藏 3评论

saltstack（十三）Reactor

一晃，研究saltstack有一个多礼拜了。坑爹的公司，试用期要6个月，最坑爹的是这6个月啥权限都没有，对于一个运维来说，没权限不等于无米之炊啊。楼主闲着无聊，也只有捣腾捣腾理论，自己搞搞小测试了。牢骚发完了，继续研究Reactor说起Reactor，就要从salt的events说起了。那个events是个什么呢？说起events就要从salt的通信机制说起了，salt采用zeromq通信的，这个

接口

通信

开发

events

2014

原创精选 2014-06-26 14:05:02 5714 阅读 4点赞 3评论

saltstack（十二）job管理

前一篇总结过mine函数，有自动调度的功能。不过那个针对命令行，函数。应用范围较少。这一篇总结一下salt里面的job管理。官网描述markhttp://docs.saltstack.cn/topics/jobs/index.html#scheduling-jobs如果把salt看成一个操作系统的话，job这东西差不多就相当于进程吧。OK，先看一下minion端。minion的/var/cache

操作系统

master

mine

原创 2014-06-25 20:51:09 10000+阅读 1点赞 1收藏 1评论

saltstack（十一）runners

这一篇，总结一下runner的用法。runner是个啥呢，runner的写法和execution module的写法差不多。不同的是，execution module需要同步到minions上，然后在minions上面执行，而runner则，在master上直接用salt-run这个命令就可以调用了，而不需要同步到minions上面。既然，runner和execution module执行场景不同

管道

资源

master

execution

原创 2014-06-25 17:48:32 4901 阅读

saltstack（十）mine函数

这一篇总结一下mine函数的用法，mine函数是个啥呢？和咱们linux里面的crontab有点类似。有了它，咱们执行任务收集信息，就不用守着屏幕了。mine其实，是从minions上面收集信息，然后保存在master上面，存在这个地方的，请看root@salt-master:~# ls /var/cache/salt/master/minions/salt-minion/mi

linux

配置文件

master

mine

原创精选 2014-06-25 15:33:20 10000+阅读

saltstack（九）returner

终于来了个重量级的，returner这东西简直是个神器啊。再也不用盯着管理端的屏幕看了，直接用returner这东西，把返回的结果同时保存在文件或者数据库里面一份。returner支持很多输出，比如各种各样的数据库，mysql,redis,monggodb。也支持输入到文件，或者/var/local/syslog里面。returner的工作过程是咋样的呢？楼主根据自己的实践总结了一下 1。其实，也

local

return

master

原创 2014-06-25 11:01:21 10000+阅读 1点赞 1评论

saltstack（八）modules(二)

OK，上一篇总结了execution modules的用法。这一篇准备总结一下state modules该怎么写。顺便把上一篇execution modules遗留下来的那个装饰器给写一下。看一下写的这个模块 root@salt-master:~# cat /srv/salt/_modules/liss.py import salt.utils.decor

原创 2014-06-23 20:52:36 3133 阅读

saltstack（七）modules(一)

模块是个啥呢？其实就是个文件。salt模块其实分为两类，一类模块，叫execution modules，这一类模块是在命令行上面执行的来个内置执行模块的链接地址：http://docs.saltstack.cn/ref/modules/all/index.html#all-salt-modules还有一类模块，叫state modules，这一类模块是在state里面使用的也来个内置state模块

链接地址

saltstack

execution

原创 2014-06-23 12:46:44 10000+阅读 1点赞 1评论

官方博客	全部文章	热门标签	班级博客
了解我们	在线客服	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	汽车开发者社区

51CTO博客

小城运维

linux下网络流量监控工具

arping详解

KVM（二）桥接网络

KVM(一)安装篇

supervisor(三)xml_rpc

supervisor(二)event

supervisor(一)基础篇

grep详解

awk（四）高级篇

awk（三）函数

awk（二）流程控制，数组

awk（一）基础篇

sed（二）高级部分

sed(一)初级篇

ansible（八）API，自定义module，自定义plugin

ansible（七）Conditionals 和 loops，自定义loops插件

正则表达式

ansible（六）variables(二)使用

ansible（五）variables(一)定义

ansible（四）roles

ansible（三）playbooks初体验

ansible（二）基础篇

ansible（一）安装篇

saltstack（十三）Reactor

saltstack（十二）job管理

saltstack（十一）runners

saltstack（十）mine函数

saltstack（九）returner

saltstack（八）modules(二)

saltstack（七）modules(一)