奋斗的寒霜的博客_Mysql,网络管理,操作系统,自动化运维,Linux监控,Linux双机,Linux web安全

用Ansible实现批量部署elasticsearch

由于业务扩展，原来的4台elastic架构已经不能支撑现在的日志流量，所以要对elastic进行节点扩展，扩展需求为10台机器，它们装同样的东西，配置基本一致，这时候就不能每台手动安装了，要进行批量安装，批量管理，ansible不需要在机器上安装客户端，管理更简单，所以我选择了ansible，下面进入实战演示：环境介绍:Centos 7.3Ansible 2.4.2Elasticsearch 6

ansible

elasticsearch

自动化运维

原创 2020-08-04 11:15:12 3165 阅读 1点赞

Elasticsearch利用快照数据迁移和灾备

面对多集群的企业级复杂架构，准备一套备份集群显得非常重要，备份集群在平时不参与读写操作，但是始终包含业务集群的所有数据，在有业务集群不能使用的时候，可以直接通过切换Elasticsearch来完成灾备效果，这篇文章写的是跨集群实现数据迁移和数据灾备一．Snapshot And Restore说明快照是从正在运行的Elasticsearch集群中获取的备份。您可以获取单个索引或整个集群的快照

elasticsearch备份

elasticsearch恢复

原创 2020-05-28 17:15:17 2580 阅读 1点赞

ELK5.6.1集群升级到6.6.0集群更新文档（完整版）

ELK5.6.1集群升级到6.6.0集群更新文档（完整版）环境介绍：elasticsearch-5.6.1---elasticsearch-6.6.0kibana-5.6.1---kibana-6.6.0Logstash-5.6.1---Logstash-6.6.0IP角色10.0.9.24Elasticsearch，Kibana10.0.9.25Elasticsearch(master)10.0

elasticsearch

kibana

logstash

ELK

原创 2019-06-17 17:28:00 1968 阅读 3点赞

PinPoint集群搭建(基于1.8.2)

Pinpoint是一个分析大型分布式系统的平台，提供解决方案来处理海量跟踪数据。Pinpoint, 2012年七月开始开发，在2015年1月作为一个开源项目启动, 是一个为大型分布式系统服务的n层架构跟踪平台。 Pinpoint的特点如下:分布式事务跟踪，跟踪跨分布式应用的消息自动检测应用拓扑，帮助你搞清楚应用的架构水平扩展以便支持大规模服务器集群提供代码级别的可见性以便轻松定位失败点和瓶颈使用字

pinpoint

hbase

nginx

tomcat

原创 2019-04-18 15:46:39 4560 阅读 1点赞

Hbase+Hadoop+Zookeeper集群(含排错)

Hbase+Hadoop+Zookeeper集群一、服务器规划和基础配置*RM-ResourceManager,HM-HMaster,SN-SecondaryNameNode,NM-NodeManager,HR-HRegionServerIPHostname角色10.0.0.1Node1RM,HM,NameNode,SN10.0.0.2Node2DataNode,NM,HR10.0.0.3Node

hbase

hadoop

zookeeper

原创推荐 2019-04-12 17:43:35 9172 阅读 2点赞 7收藏

MMM架构实现MySQL高可用读写分离（进阶版,包含Amoeba）

前两天逛博客偶然发现了某大神写的关于MMM的文章，看完就迫不及待的自己试了一下，大神写的很顺畅，以为自己也能操作的很顺畅，但是实际情况是手脚太不麻利，碰到很多坑，如果大神的文章是“平地起高楼”,那我这篇则是“平房起别墅”，因为我生产环境中已经有两台Mysql做双主同步，这篇文章说的是如何改造升级现有架构！环境介绍：IP操作系统数据库软件角色/VIP192.168.6.109CentOS7.2Mys

Mysql

MMM

Amoeba

高可用

读写分离

原创精选 2018-07-19 09:39:10 10000+阅读 4点赞 3收藏 3评论

Kubernetes核心概念之Volume存储数据卷详解

在Docker中就有数据卷的概念，当容器删除时，数据也一起会被删除，想要持久化使用数据，需要把主机上的目录挂载到Docker中去，在K8S中，数据卷是通过Pod实现持久化的，如果Pod删除，数据卷也会一起删除，k8s的数据卷是docker数据卷的扩展，K8S适配各种存储系统，包括本地存储EmptyDir,HostPath,网络存储NFS,GlusterFS,PV/PVC等，下面就详细介绍下K8S的

k8s

docker

volume

原创精选 2018-07-02 16:53:10 10000+阅读 3点赞 3收藏

Zabbix利用JMX监控多实例Tomcat运行状态

自使用Zabbix监控系统以来，一直想用JMX来监控Tomcat，但是一直都没配置成功，总有一些问题，监控端的报错又很抽象，搜索网上大都是复制粘贴之产物，或者是缺斤短两之网文，但是一直都没放弃，至今终于配置成功，并且成功获取数据，形成图形，现在把自己解决问题的过程和配置的一些心得整理成文.环境介绍：Centos 6.5Zabbix 2.2.15Tom

zabbix

jmx

tomcat

原创精选 2018-06-28 11:45:55 10000+阅读 2点赞 7评论

Kubernetes核心概念之Service详解

Service是k8s中非常重要的组成单元，作用是作为代理把在POD中容器内的服务发布出去，提供一套简单的发现机制和服务代理，也就是运维常说的‘前端’概念，那么它如何实现代理功能以及自动伸缩服务架构，下面将在本文中详细说明。Service主要的功能是映射pod对应的端口到宿主机上（代理），或是做负载均衡，还可以将内部IP发布成外部IP一.服务代理1.首先创建RC的Pod(使用的是上一节的脚本)vi

k8s

docker

service

原创精选 2018-06-25 14:19:45 8749 阅读 2点赞 1收藏

Kickstart无人值守安装Centos6系统+集成saltstack客户端程序

如果要同时上线2,3台服务器，可以使用手动安装操作系统，10台20台基本没法忍受，上百台呢，根本不可能手动安装管理，只考虑到这里并不能解决所有问题，只装个系统并不能满足批量管理的需求，这就需要在安装好系统后自动启动salt客户端程序，实现在装完系统后就在运维人员的管理范围之类，这篇文章就是基于这样的需求而完成的。 &

kickstart

saltstack

dhcp

tftp

vsftpd

原创 2018-04-24 15:43:59 10000+阅读 3点赞

Kubernetes核心概念之Replication Controller详解

Kubernetes

docker

虚拟化

原创 2017-12-08 13:41:42 10000+阅读 3点赞 1收藏

Kubernetes对象之Pod详解(附安装部署方法)

首先介绍一下K8S是什么：(引用自K8S中文社区)Kubernetes是容器集群管理系统，是一个开源的平台，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。通过Kubernetes你可以：快速部署应用快速扩展应用无缝对接新的应用功能节省资源，优化硬件资源的使用其实K8S能够做的事情有很多，而且操作简单，十分方便，下面先介绍如何安装，然后是对于pod的一些典型应用环境介绍：CentOS7.2K

虚拟化技术

kubernetes

docker

原创精选 2017-11-27 16:54:28 10000+阅读 2点赞

利用Ansible部署运行Apache(http)的Docker容器

在自动化运维领域，除了saltstack，还有ansible这个批量安装部署工具，在写具体内容先，先谈谈我用过两个工具后的感想。 saltstack是C/S框架，要在客户端装软件，并且启动服务才能进行管理，ansible是通过ssh连接到客户端的，也就是说必须把密钥传给客户端才能进行管理，虽然可以关闭这个验证方式，但是生产环境中肯定是不能关闭的，从这一点看，还是ansibl

apache

自动化

ansibile

原创精选 2017-11-02 18:15:58 4053 阅读 4点赞 3收藏

Saltstack批量安装部署Zabbix代理(附zabbix自动注册详解)

新上线的服务器需要部署zabbix客户端，并且加入到zabbix监控中，由于新服务器数量较大，所以采用全自动安装部署，文中使用了saltstack的批量部署和zabbix的自动注册结合完成全部需求环境介绍：Centos6.5saltstack 2015.5.10zabbix 2.2.15一.Zabbix自动注册1.启用探索功能点击local network选择一个探索的

运维

自动化

zabbix

原创精选 2017-10-25 16:08:30 5513 阅读 3点赞 1收藏

Haproxy负载均衡/动静分离

在前端领域做负载均衡，动静分离的程序有很多，比较常用的是nginx和Haproxy,今天就说一下Haproxy在这两方面的表现，文章参考很多网文写成，再加上自己的实验成果，文中所有解释都经过实际环境验证。环境介绍:Centos 6.5Haproxy 1.7.9前端 192.168.6.10后端 192.168.6.20(web1) 192.168.6.21(w

负载均衡

Haproxy

动静分离

原创 2017-10-20 15:05:22 2441 阅读 1点赞 1收藏

Saltstack批量部署tomcat（多实例）

上一篇讲解了如何批量部署nginx,这篇说一说如何批量部署tomcat,其实方式上都差不多，tomcat多了个java必须配置，以及需要多个实例一起部署。方式方法上可能不是最优方案，功能上是都可以实现基本需求的。环境介绍：Centos 6.5tomcat 7.0.68java 1.7.0_80实例3个，site.aaa.com|boss.aaa.co

运维

自动化

saltstack

原创精选 2017-09-21 14:46:40 2229 阅读 6点赞 1收藏

Saltstack批量编译部署nginx（多模块）

最近一直在研究saltstack的同步文件和批量执行命令，随着架构的变大，批量部署的需求也变得明显起来了，我需要用一条命令就部署好nginx和tomcat，并且符合我所有的环境需求，可以直接投入生产环境使用，这就需要用到saltstack的批量安装部署功能了。这篇文章主要介绍nginx的批量部署，下篇讲解tomcat多实例的批量部署方法。环境介绍：Centos 6.5salt&nbs

运维

自动化

saltstack

原创精选 2017-09-20 13:43:32 2477 阅读 6点赞 5收藏 2评论

Python实现一键安装部署LNMP环境

最近一直在学Python,东西比较多，时间持续的也比较长，为了能够学以致用，想到了原来写过的shell一键安装部署LNMP脚本，既然shell能写，Python也一定能写，就用学到的知识写了下面这个版本，这可能并不是最优版本，等学到更多东西的时候再进行优化升级！环境介绍：Python 2.6.6Centos 6.5nginx 1.10.1mysql 5.6.34php 5.3.3代码

Python

一键

LNMP

原创 2017-08-04 17:54:37 9317 阅读 2点赞 1收藏

利用脚本备份Mysql数据库和binlog日志

之前写了一篇《用Mysqldump实现全库备份+binlog的数据还原》中使用了手动的方式实现了mysql的备份和恢复，这里就把工作内容自动化，在运维工作中最重要的是运维思维，把复杂的，重复化的工作，变成简单的，自动化的，这就是运维的思维！闲话少说，直接上脚本首先是为mysql做指定库文件的全库备份vim mysqlbak.sh#!/bin/bash#定义数据库目录，要能找到mysql

备份

mysql

脚本

原创 2017-07-06 10:02:25 3191 阅读 1点赞 1收藏

用Mysqldump实现全库备份+binlog的数据还原

随着业务量的增长，数据库也是成倍增长，原来一直使用的全库备份不再适合现在的数据库了，动辄就备份10G-20G,太占用磁盘空间，所以就考虑用更简洁更快速更节省磁盘空间的备份方法，这就想到了使用binlog日志来进行备份和恢复，下面是具体实施的方法：环境介绍：操作系统：Centos 7.2数据库：Mysql 5.6一.安装Mysql和改配置文件安装就不具体介绍了，网上教程很多，配置文件需

备份

mysql

原创 2017-06-26 15:59:52 4571 阅读 1点赞

Linux高级管理之ACL（访问控制列表）实战应用

实战目标：组用户zu1jackrobinzu2zhangsanlisibossleader1.所有目录，文件统一保存在一个大目录中2.每个部门拥有一个独立的文件夹3.不同部门之间不可访问各自的目录4.每个员工在所在部门目录下拥有一个所属的目录5.同部门不同员工之间可以查看各自目录内容，单不可修改，用户仅能够修改自己的内容6.boss组内的用户对所有组的文件均有访问权限，但无修改权限一.创建用户和组

acl

访问

控制列表

原创精选 2017-06-01 21:21:16 1830 阅读 1点赞

Docker私库搭建和使用

上一篇中描述了一些Docker中常用的命令和操作，这篇我们来搭建一个自己的私库，用来存放和分发镜像，如果你对Docker基础命令不算熟悉，请参考《Docker常用命令和操作》环境介绍：操作系统：Centos6.5软件：Docker1.7.1服务器端：192.168.1.10客户端：192.168.1.20启动服务器端docker服务由于服务器在推送镜

虚拟化技术

docker

原创精选 2017-05-11 11:10:58 7989 阅读 1点赞 1收藏

Docker常用命令和操作

Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。（引用于百度百科）作为一个运维人员，要做的就是部署/维护环境，开发提交代码后快速部署/启动服务/测试人员进行测试，是现在最新面临的问题，那么如何运行

虚拟化

docker

原创 2017-04-28 17:08:19 2014 阅读 1点赞

Puppet批量部署tomcat

上一篇聊了puppet的安装部署方法，如果你还没有安装puppet，请点击下方链接查看具体安装方法：《搭建Puppet自动化部署环境》这篇来看一下如何利用Puppet全自动部署tomcat，在Puppet中有很多资源，其中比较常用的包括：package 通过程序安装软件service &nbs

批量部署

puppet

自动化运维

原创 2017-04-06 17:29:40 2183 阅读 1点赞

搭建Puppet自动化部署环境

最近项目上线，自己在部署过程中发现很多问题，发现没有自动化部署工具简直就是纯体力活儿，费时又费力，干的事就是那几个，就不能“一键完成么”的想法油然而生，答案是肯定的，自动化的工具有很多，之所以安装Puppet,只是因为比起别的软件，这款软件原来有学习过，现在又重新拾起来，要把它用到生产环境中，让运维工作不再是体力活，而是实现，全自动部署，更新，这篇只

运维

自动化

puppet

原创精选 2017-04-04 20:22:56 2255 阅读 1点赞 2收藏

Iptables常用配置和常用协议端口

由于在服务器部署时，为了方便部署，把本机的iptables都关上了，然后还手欠的保存了设置，再想找回来是不可能了，那就重新设置一些适合我的防火墙策略吧！如果你使用远程连接到你的服务器，那么ssh端口是不可少的，不要把自己关在外面！ssh默认端口号是22，可以通过/etc/sshd/sshd.conf来修改iptables -I INPUT -p tcp --dport 22 -j ACCEPT然后

防火墙

iptables

协议端口

原创 2017-03-20 15:00:41 2093 阅读 1点赞 1收藏

Yum/RPM安装的Nginx如何添加第三方模块(LuaJIT)

此文参考很多网上文章并自己实际测试成功，经整理发出以下博文。主要参考http://www.ttlsa.com/nginx/nginx-modules-ngx_lua/ 在我们进行nginx部署的时候，可能没考虑到后续业务量的增大带来的性能上的需求，所以只是用Yum/RPM一键安装的Nginx，这种安装虽然很方便，但是模块是不可选的，安装路径也是默认，等到网站访问量上来了才发现Nginx的现有配置无

nginx

第三方模块

LuaJIT

转载 2017-01-25 10:25:27 10000+阅读 1点赞

Nginx+Tomcat+SSL配置(包括https跳转及腾讯免费SSL申请流程)

https

ssl

nginx

原创 2016-12-20 15:02:13 9410 阅读 1点赞

Zabbix实现短信报警设置（实战）

配置环境：zabbix 2.2.151.配置示警媒介类型此文件所在位置：/usr/lib/zabbix/alertscripts/必须拥有执行权限，并且改变所属用户和组要修改此脚本的路径，需修改zabbix_server.confAlertScriptsPath=/usr/lib/zabbix/alertscripts脚本内容：#!/bin/bash## Filename: sendSMS.sh#

zabbix

短信报警

原创 2016-12-15 12:52:03 10000+阅读 1点赞 1收藏 2评论

Keepalived+NFS+SHELL脚本实现NFS-HA高可用

本来想做DRBD+HEARTBEAT，但是领导说再加硬盘浪费资源，没有必要，而且在已有硬盘上做风险较大，所以就只能用rsync来实现数据同步了，实验中发现很多的坑，都用脚本和计划任务给填上了，打算把这套直接用在生产环境中，到时候如果还遇到什么问题，再进行修正和补全，下面是项目细节：主机配置：web:192.168.6.10 Centos 6.4nfs1:192.168.6.1 Cento

shell

nfs

keepalived

原创 2016-12-15 11:56:52 5934 阅读 1点赞 2收藏

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

linux运维技术

用Ansible实现批量部署elasticsearch

Elasticsearch利用快照数据迁移和灾备

ELK5.6.1集群升级到6.6.0集群更新文档（完整版）

PinPoint集群搭建(基于1.8.2)

Hbase+Hadoop+Zookeeper集群(含排错)

MMM架构实现MySQL高可用读写分离（进阶版,包含Amoeba）

Kubernetes核心概念之Volume存储数据卷详解

Zabbix利用JMX监控多实例Tomcat运行状态

Kubernetes核心概念之Service详解

Kickstart无人值守安装Centos6系统+集成saltstack客户端程序

Kubernetes核心概念之Replication Controller详解

Kubernetes对象之Pod详解(附安装部署方法)

利用Ansible部署运行Apache(http)的Docker容器

Saltstack批量安装部署Zabbix代理(附zabbix自动注册详解)

Haproxy负载均衡/动静分离

Saltstack批量部署tomcat（多实例）

Saltstack批量编译部署nginx（多模块）

Python实现一键安装部署LNMP环境

利用脚本备份Mysql数据库和binlog日志

用Mysqldump实现全库备份+binlog的数据还原

Linux高级管理之ACL（访问控制列表）实战应用

Docker私库搭建和使用

Docker常用命令和操作

Puppet批量部署tomcat

搭建Puppet自动化部署环境

Iptables常用配置和常用协议端口

Yum/RPM安装的Nginx如何添加第三方模块(LuaJIT)

Nginx+Tomcat+SSL配置(包括https跳转及腾讯免费SSL申请流程)

Zabbix实现短信报警设置（实战）

Keepalived+NFS+SHELL脚本实现NFS-HA高可用

欢迎