msj0905的博客_运维专题

saltstack+git+rsync发布代码

一度git版本利用tag上线 ####################git部分###############脚本#!/bin/bash#630manage的pull代码方法git --git-dir=630manage/.git--work-tree=630manage clean -dfxgit --git-dir=630manage/.g

发布

原创 2017-11-03 12:44:35 2278 阅读 1点赞

centos7 nfs挂载设置

###############################p_w_picpaths设置nfs设置：48设置： vim /etc/exports/mnt/license_p_w_picpaths 10.30.93.76(rw,sync)/mnt/license_p_w_picpaths/new_disk 10.30.93.76(rw,sync)/mnt/license_p_w_picp

Linux

nfs

原创 2017-09-04 10:17:34 1448 阅读 1点赞

阿里巴巴运维中台的演进与建设

一、运维基础平台——StarAgentStarAgent 在阿里已经有五六年，甚至更早的时间。阿里所有的物理机、虚拟机以及容器都会装这个 agent，StarAgent 是管理所有 agent 的系统，基本上要和机器交互都需要通过这个平台。StarAgent 是一个生态平台，实际上不会做具体的业务，具体的业务还是通过各个业务平台去实现的。它们要和服务器进行交互必须通过我们这个平台。例如，应用运维平

平台方案

转载 2017-06-15 09:18:13 3610 阅读 1点赞

CentOS 6.6 下源码编译安装MySQL 5.7.5

mysql

用户

清理

local

源码下载

转载精选 2016-02-17 12:15:37 676 阅读 1点赞

kafka基础集群部署

kafka集群部署方案ZooKeeper第一步主机名称到IP地址映射配置ZooKeeper集群中具有两个关键的角色Leader和Follower。集群中所有的结点作为一个整体对分布式应用提供服务集群中每个结点之间都互相连接所以在配置的ZooKeeper集群的时候每一个结点的host到IP地址的映射都要配置上集群中其它结点的映射信息。例如我的ZooKeeper集群中每个结点的配置以zk-01为例/e

主机

IP地址

配置文件

信息

角色

原创 2015-12-23 14:53:54 891 阅读 1点赞

Python之路【第一篇】：Python简介和入门

Python简介 Python前世今生python的创始人为吉多·范罗苏姆（Guido van Rossum）。1989年的圣诞节期间，吉多·范罗苏姆为了在阿姆斯特丹打发时间，决心开发一个新的脚本解释程序，作为ABC语言的一种继承。最新的TIOBE排行榜，Python赶超PHP占据第五！！！由上图可见，Python整体呈上升趋势，反映出Python应用越来越广泛并

Google

Youtube

网络服务

Facebook

阿姆斯特丹

转载精选 2015-12-14 22:06:08 558 阅读 1点赞

Python总结：Python基础（一）

Python之路【第二篇】：Python基础（一）入门知识拾遗一、作用域对于变量的作用域，执行声明并在内存中存在，该变量就可以在下面的代码中使用。123if 1==1: name = 'wupeiqi'print name下面的结论对吗？外层变量，可以被内层变量使用内层变量，无法被外层变量使用二、三元运算1result = 值1 if 条件

二进制

八进制

十六进制

十进制

result

转载精选 2015-12-13 22:43:58 520 阅读 1点赞

Kafka部署

一、基本概念介绍Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计。这个独特的设计是什么样的呢？首先让我们看几个基本的消息系统术语：Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一个或多个服务组成

消费者

效果图

服务端

时间段

topic

原创 2015-12-13 15:15:55 779 阅读 1点赞

Kafka剖析（一）：Kafka背景及架构介绍

Kafka是由LinkedIn开发的一个分布式的消息系统，使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark都支持与Kafka集成。InfoQ一直在紧密关注Kafka的应用以及发展，“Kafka剖析”专栏将会从架构设计、实现、应用场景、性能等方面深度解析Kafka。背景介绍Kafka创建背景Kafka是

服务器

访问量

管道

周期性

原创 2015-12-13 15:08:11 462 阅读 1点赞

Centos安装Kafka集群

kafka是LinkedIn开发并开源的一个分布式MQ系统，现在是Apache的一个孵化项目。在它的主页描述kafka为一个高吞吐量的分布式（能将消息分散到不同的节点上）MQ。在这片博文中，作者简单提到了开发kafka而不选择已有MQ系统的原因。两个原因：性能和扩展性。Kafka仅仅由 7000行Scala编写，据了解，Kafka每秒可以生产约25万消息（50 MB），每秒处理55万消息（1

项目

开发

吞吐量

转载精选 2015-12-11 23:03:13 308 阅读 1点赞

Mysql ibdata 丢失或损坏如何通过frm&ibd 恢复数据

mysql存储在磁盘中，各种天灾人祸都会导致数据丢失。大公司的时候我们常常需要做好数据冷热备，对于小公司来说要做好所有数据备份需要支出大量的成本，很多公司也是不现实的。万一还没有做好备份，数据被误删除了，或者ibdata损坏了怎么办呢？别担心，只要有部分的frm、ibd存在就可以恢复部分数据。注意：一、这个是对innodb的数据恢复。myisam不需要这么麻烦，只要数据文件存在直接复制过去就可

mysql

数据恢复

数据库

如何

下一步

转载精选 2015-12-07 14:43:17 489 阅读

Redis集群解决方案比较

调研比较了三个Redis集群的解决方案：系统贡献者是否官方Redis实现编程语言TwemproxyTwitter是CRedis ClusterRedis官方是CCodis豌豆荚否Go+C1.基本架构1.1 Twemproxy增加Proxy层，由Proxy实现一致性哈希算法（支持：KETAMA/取模/随机）数据分片算法：采用一致性哈希算法，以KETAMA为例：1.2 Redis Cluster无中心

客户端

路由表

解决方案

编程语言

定向

转载精选 2015-12-03 13:41:02 5059 阅读 1收藏

codis集群部署实战

一、概要1、折腾codis集群已经快两个月了，感谢一直以来codis的作者刘奇和黄东旭的耐心支持，在这里给你们点个赞，现在我司已经有一个业务跑在了 codis集群上，目前只是切了整个业务的10%的量，预计下周会全量切到codis上，这个时候大家肯定特别想知道codis稳定吗？有没有什么bug 啊，你想知道的也是我想知道的，搞起吧，用了才知道，反正目前我们这没发现啥问题，一些小的问题已经及时联系作者

解决方案

文章

初学者

单机

注册会员

转载精选 2015-12-03 13:38:27 518 阅读

CentOS6.5+Puppet3.7.3 安装、配置及测试

CentOS6.5+Puppet3.7.3 安装、配置及测试 OS:CentOS-6.5-x86_64Puppet 3.7.3Puppet master: master.fisteam2.comPuppet clients:node1-5.fisteam2.comPuppet 要求所有机器有完整的域名（FQDN），如果没有 DNS 服务器提供域名的话，可

服务器

客户端

master

服务端

controls

转载精选 2015-12-03 12:48:25 374 阅读

阿里云服务器部署方案

阿里云服务器部署方案----------------------------基础部署-------------------------------------#################挂载数据盘：：1.查看需要挂载的数据光盘fdisk -l 显示/dev/xvdb为可单挂载的数据库，否则为无数据盘可挂载挂载方法fdisk -S 56 /dev/xvdb根据提示，依次输入“n”，

服务器

storage

阿里云

defaults

数据光盘

原创 2015-11-22 13:16:41 1756 阅读

tomcat日志脚本

#!/usr/bin/env python# coding=utf-8#---------------------------------------------------------# Name: Tomcat错误日志发送邮件脚本# Purpose: &

python

Copyright

原创 2015-11-21 22:23:53 543 阅读

probe要求四个角色

一、简介psi-probe是lambdaprobe的一个分支版本，用于对Tomcat进行监控，比tomcat的manager强大很多。psi就是一个形如叉子的符号Ψ，希腊字母的第23个字母，用来代表fork。为啥需要分支呢，因为lambdaprobe已经多年没有更新（大致在2006年就停止发布新版本了）。二、下载地址http://code.google.com/p/psi-probe/downlo

Java

用户

角色

原创 2015-11-21 22:18:24 666 阅读

Python基础（二）

内置函数文件操作操作文件时，一般需要经历如下步骤：打开文件操作文件一、打开文件1文件句柄 = file('文件路径', '模式')注：python中打开文件有两种方式，即：open(...) 和 file(...) ，本质上前者在内部会调用后者来进行文件操作，推荐使用 open。打开文件时，需要指定文件路径和以何等方式打开文件，打开后，即可获取该文件句柄，日后通过此文件句柄对该文件操作

linux

windows

二进制

python

close

转载精选 2015-11-13 13:31:04 529 阅读

Python基础（一）

入门知识拾遗一、作用域对于变量的作用域，执行声明并在内存中存在，该变量就可以在下面的代码中使用。123if 1==1: name = 'wupeiqi'print name下面的结论对吗？外层变量，可以被内层变量使用内层变量，无法被外层变量使用二、三元运算1result = 值1 if 条件 else 值2如果条件为真：result = 值

二进制

八进制

十六进制

十进制

result

转载精选 2015-11-13 13:27:50 302 阅读

普通o2o公司架构部署

架构方案web1:192.168.1.211web1:192.168.1.212web1:192.168.1.214部署软件：java tomcat redis主从集群 zookeeper集群 elastcserch集群####三台服务器Jdk安装部署rpm –ivh jdk-7u67-linux-x64.rpmvi /roo

服务器部署框架

原创 2015-11-06 11:10:13 838 阅读

CentOS 6.5下JIRA安装部署

JIRA简介：JIRA：专业的缺陷跟踪和项目管理软件JIRA是一个项目跟踪管理工具，帮助团队创建计划任务、构建并发布优秀的产品。全球成千上万的团队选择JIRA，用JIRA来捕获、组织管理缺陷、分配任务，跟踪团队的活动。不论在桌面PC还是移动终端设备上，JIRA都能完美的运行，帮助团队完成工作。更多的介绍这里就不详细列出了；http://www.unlimax.com/jira.html及http:

软件

管理工具

项目管理

产品

计划

原创 2015-10-22 22:53:40 550 阅读

zabbix监控tomcat（2）

zabbix监控tomcat1.编译zabbix的时候需要添加参数--enable-java关于如何安装zabbix,可以参考上一篇文章http://blog.unix178.com/备份zabbix_server.conf和zabbix_agentd.conf文件，重新编译安装zabbix[root@nginx zabbix-2.2.0]# ./configure

监控

文章

如何

local

原创 2015-10-15 22:30:51 763 阅读 2点赞 1评论

Tomcat7 catalina.out 日志分割

最近由于工作需要，tomcat 的catalina.out文件的不断扩大，导致系统磁盘空间边变小，而且管理也难于管理，所以想用一种工具来分割它。网上找了找用cronolog安装过程如下：下载（最新版本） # wget http://cronolog.org/download/cronolog-1.6.2.tar.gz2、解压缩

空间

security

网上

local

而且

转载精选 2015-09-28 17:02:51 804 阅读

Jenkins+Maven+Git搭建持续集成和自动化部署的配置手记（1）

前言持续集成这个概念已经成为软件开发的主流，可以更频繁的进行测试，尽早发现问题并提示。自动化部署就更不用说了，可以加快部署速度，并可以有效减少人为操作的失误。之前一直没有把这个做起来，最近的新项目正好有机会，费了一番功夫总算搞好了，特此记录。1. 开发环境我这边建立的标准开发环境如下： 1. Maven做项目管理；&

程序

软件开发

项目管理

手记

新项目

原创 2015-09-26 09:18:31 549 阅读

redis sentinel 主从切换(failover)解决方案

主从复制简单来说就是把一台redis数据库中的数据同步到另一台redis数据库，并且按照数据流向，数据的发送者我们称作master，数据的接受者我们称作slave（master/slave的划分并不是那么一定的，譬如B可以作为A的slave，但同时也可以作为C的master），下面就从 slave和master的角度分别说明主从复制流程。首先是slave端，对于slave端来说，主

虚拟机

客户端

访问量

参考资料

原创 2015-09-21 18:47:53 1561 阅读

数据迁移至RDS-MySQL之利用RDS管理控制台

MySQL之利用RDS管理控制台数据迁移至RDS-MySQL之利用RDS管理控制台该方法是一种MySQL的在线迁移方法，可以不停服务就能够完成数据库的迁移工作，支持MySQL 5.1 5.5、 5.6（5.0版本只支持全量迁移）的迁移。更多迁移信息可参考：如何快速平稳的迁入RDS>>迁移注意事项1)MySQL的系统库将不允许迁移至RDS，不允许迁移的数据库包括：

密码

mysql

在线

控制台

建数据库

原创 2015-09-16 11:38:52 942 阅读

阿里云服务器vpn配置详解（测试成功）

阿里云服务器配置详解（测试成功）我的操作环境：阿里云香港节点云服务器，操作系统：CentOS 6.3 64位名词解释：pptp是VPN服务器类型之一，PPP是一种数据链路层协议，iptables是IP信息包过滤系统。【正文】 1 服务器端安装软件 1.1 首先安装ppp，命令： yum install p

其他

原创 2015-09-16 11:21:04 2410 阅读

Zabbix告警集成实时接收Zabbix告警，提供微信、移动APP、短信邮件提醒。

1.下载agent软件包请在Zabbix服务器中，使用root或zabbix用户下载软件。下载agent 2.添加应用创建Zabbix应用，并获取appkey，见下图04b9832b-14b4-4c61-343d-5926ff8af672 3.安装Agent 将agent更新到zabbix的外部告警脚本目录alertscripts，如果是源码安装的请自行更改目录。 ta

服务器

软件包

配置文件

短信

下载软件

原创 2015-09-16 11:12:43 1969 阅读

Dubbo分布式服务框架

1. Dubbo是什么？Dubbo是一个分布式服务框架，致力于提供高性能和透明化的RPC远程服务调用方案，以及SOA服务治理方案。简单的说，dubbo就是个服务框架，如果没有分布式的需求，其实是不需要用的，只有在分布式的时候，才有dubbo这样的分布式服务框架的需求，并且本质上是个服务调用的东东，说白了就是个远程服务调用的分布式框架（告别Web Service模式中的WSdl，以服务者与消费者的方

接口

模型

消费者

动态

做什么

转载精选 2015-09-14 17:55:35 722 阅读

elasticsearch-1.7.1 集群搭建

##elasticsearch-1.7.1 集群搭建redis1:192.168.1.10redis2:192.168.1.11 redis3:192.168.1.12###java安装rpm –ivh jdk-7u67-linux-x64.rpmvi /root/.bash_profile添加内容JAVA_HOM

java

storage

source

local

原创 2015-09-14 16:38:25 1657 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

我的天空

saltstack+git+rsync发布代码

centos7 nfs挂载设置

阿里巴巴运维中台的演进与建设

CentOS 6.6 下源码编译安装MySQL 5.7.5

kafka基础集群部署

Python之路【第一篇】：Python简介和入门

Python总结：Python基础（一）

Kafka部署

Kafka剖析（一）：Kafka背景及架构介绍

Centos安装Kafka集群

Mysql ibdata 丢失或损坏如何通过frm&ibd 恢复数据

Redis集群解决方案比较

codis集群部署实战

CentOS6.5+Puppet3.7.3 安装、配置及测试

阿里云服务器部署方案

tomcat日志脚本

probe要求四个角色

Python基础（二）

Python基础（一）

普通o2o公司架构部署

CentOS 6.5下JIRA安装部署

zabbix监控tomcat（2）

Tomcat7 catalina.out 日志分割

Jenkins+Maven+Git搭建持续集成和自动化部署的配置手记（1）

redis sentinel 主从切换(failover)解决方案

数据迁移至RDS-MySQL之利用RDS管理控制台

阿里云服务器vpn配置详解（测试成功）

Zabbix告警集成实时接收Zabbix告警，提供微信、移动APP、短信邮件提醒。

Dubbo分布式服务框架

elasticsearch-1.7.1 集群搭建