丁香花下的博客_高可用web群集,自动化运维ansible,zabbix

Docker-compose部署ELK

Docker-compose部署单机ELK环境主机IP 192.168.0.9Docker version 19.03.2docker-compose version 1.24.0-rc1elasticsearch version 6.6.1kibana version 6.6.1logstash

elk

docker-compose

原创 2019-09-17 23:21:14 5728 阅读 1收藏

ELK--grok正则分析日志与多日志收集

1、logstash配置文件2、访问nginx，产生新的日志3、查找索引有一条logstash-2019-08-28的索引

ELK

logstash-grok正则匹配

logstash多日志分析

原创精选 2019-08-30 16:10:04 5685 阅读 3点赞 1收藏

elasticserach基本使用

上一章讲述了ELK的搭建，本章主要为elasticsearch的基本使用1、查看elasticsearch信息GET / 2、创建索引PUT /test3、获取全部索引GET _cat/indices?v4、向索引中插入数据PUT /test/info/1{ "name":"zhangsan", "age":20}5、获取插入索引的信息GET /test/info/16、获取单条索引的

elasticserach基本使用

原创 2019-08-28 22:26:14 1434 阅读

ELK6.6搭建

ELK6.6搭建ELK简介：ELK主要有elasticsearch、logstash、kibana组成。elasticsearch主要功能为存储日志，logstash为收集日志，kibana提供页面展现。最为重要的是elasticsearch，存储日志组件一旦丢失，日志数据就会丢失。logstash和kibana

elk6.6搭建

原创 2019-08-28 21:52:03 1806 阅读

gitlab上传公钥和项目代码

gitlab上传项目需要ssh公钥免交互，本文介绍gitlab设置公钥和上传项目的操作。一、创建秘钥对[root@localhost ~]# ssh-keygen -t rsa #一路回车即可二、上传秘钥[root@localhost ~]# cat ~/.ssh/id_rsa.pub #查看公钥三、上传本地代码1、要先设置用户和邮箱[root@localhost opt]# git co

gitlab上传代码相关操作

原创 2019-08-03 14:51:04 1742 阅读 1收藏

gitlab创建项目及分支

gitlab创建项目及分支gitlab对于代码版本的管理和控制，每个项目都有不同的分支。master分支是稳定版的分支，负责发行的。develop分支：开发者在接到需求之后主要从事开发工作的分支。release分支：测试在接到测试工作时主要使用的分支，在版本进入测试周期之后，会将该版本的测试代码从develop分支merge到rel

gitlab分支介绍

原创 2019-08-03 14:06:26 10000+阅读 1收藏

gitlab添加邮箱设置

邮箱是企业进行工作中的通知，交互必不可少的部分，gitlab同样支持邮箱的配置，方便对一些操作有邮件的提醒，本文以QQ邮箱为例，进行gitlab邮箱的添加。一、开启smtp功能登陆邮箱==》设置==》账户==》POP3/IMAP/SMTP/Exchange/CardDAV/CalDAV服务==》开启SMTP服务==》接收验证二、修改配置文件[root@localhost opt]# grep -r

gitlab配置邮箱

原创 2019-08-03 13:47:52 6709 阅读

gitlab代码版本管理（安装）

gitlab安装GitLab 是一个用于仓库管理系统的开源项目，使用Git作为代码管理工具，并在此基础上搭建起来的web服务。本文为大家带来gitlab的安装详解。一、环境介绍系统：CentOS Linux release 7.6.1810 (Core) IP：192.168.0.8配置：2C4G二、安装环境包yum -y install po

gitlab搭建

gitlab安装

原创 2019-08-03 13:28:23 2009 阅读

Nginx之动静分离配置

Nginx之动静分离 nginx的反向代理，我想大家应该了解，前端nginx代理后端的tomcat，但是在处理静态资源（相关图片等）上tomcat并不占优势。所以动静分离利用nginx的location匹配，使静态资源自己处理，或者交由其他服务器处理，动态资源交给tomcat处理。这样带来的好处是加快了网站的访问速度，减轻后

nginx动静分离

原创 2019-07-21 16:21:26 6279 阅读 1点赞

Nginx配置https

nginx配置httpsHTTPS，超文本传输安全协议，是以安全为目标的HTTP通道，简单讲是HTTP的安全版。即HTTP下加入SSL层，HTTPS的安全基础是SSL，因此加密的详细内容就需要SSL。以下将介绍如何设置https。一、配置文件设置这里我使用的是虚拟主机设置httpsnginx.

https

nginx

原创 2019-07-21 15:24:20 4006 阅读 1收藏 1评论

nginx配置文件

nginx配置文件nginx配置文件，由4个部分组成1、mian（全局设置）该部分设置影响全局,在http外的内容即全局定义，设置会向下继承，http会继承main设置，并向下继承2、server（主机设置） server部分指令用于指定主机和端口，server会继承http的设置，并向下继承3、location （url匹配

nginx配置文件

nginx正则匹配

nginx中location

原创 2019-07-21 14:50:28 642 阅读

Nginx高并发之IO模型

Nginx高并发之IO模型介绍 nginx 是一个高性能的HTTP和反向代理web服务器，同时也提供了IMAP/POP3/SMTP服务。众所周知nginx的相比于apache有更高的并发，可以接收处理更多的访问请求，这得益于IO模型，下面为大家介绍IO模型相关。一、先了解下同步异步，阻塞和非阻塞：同步/异步

IO模型

nginx高并发

原创 2019-07-21 13:41:02 2619 阅读

shell脚本（系统工具箱V2）

shell脚本系统工具箱V2经过两个多月的学习，最近一段时间总结shell脚本的一些东西，这个系统工具箱应该是暂且the end掉shell脚本的部分，7-8月重新写一遍运维的东西，加油~#!/bin/bash ################# #系统工具箱v2 #2019年6月10日14:44:36 ###########

shell脚本

系统工具箱

原创 2019-06-27 21:40:37 754 阅读 2收藏

shell脚本（zabbix监控mysql数据库）

使用shell脚本结合zabbix监控mysql这里举个典例，用过zabbix的应该知道，监控一些应用是需要自己写脚本的。以下脚本比较直白简单，将每个需要监控的项写成函数，执行的时候调用就好了。结尾$1实际是为了接受脚本第一个参数，可以用在zabbix中填写监控项。#!/bin/bash uptime() { mysqladmin s

shell脚本

原创 2019-06-27 21:06:18 1526 阅读 1收藏

shell脚本（保留最近N天的备份）

#!/bin/bash ############################ #保留最近N天的备份 #2019年6月16日11:32:59 ############################ #需求 #文件备份格式为date +%F/%H/%M #节假日不备份 #无论过几个节假日，始终保留最新N天的备份 ##############模拟备份 mkdir $(pwd)/test touch

shell脚本

保留最近N天内容

原创 2019-06-27 20:13:40 1700 阅读

shell脚本（删除7天之前的文件）

#!/bin/bash ######################### #删除7天之前的文件 # #2019年6月15日18:12:26 # ######################### path=/opt/teach/shell/project/test/ find $path -type f -mtime +7 | xargs rm -rvf #find $path -

find命令

原创 2019-06-27 20:02:20 5173 阅读

awk与nginx日志分析

首先先了解下nginx日志的格式（未修改conf文件的日志格式）220.248.44.xx--[11/Jun/2019:08:32:47+0000]"GET/HTTP/1.1"20053902"http://47.102.121.2xx/""Mozilla/5.0(WindowsNT10.0;WOW64;Trident/7.0;rv:11.0;SE

awk

nginx日志分析

原创 2019-06-25 21:55:07 1070 阅读

shell脚本（使用数组统计数据）

使用数组统计数据例一：统计/etc/passwd中/bin/bash和/sbin/nologin的个数有多少#!/bin/bash #定义变量，拿到/etc/passwd最后一行 NF=`awk -F ":" '{ print $NF }' /etc/passwd` #定义关联数组login declare -A login #遍历NF变量，即etc/pas

数组

shell脚本

原创 2019-06-25 20:32:42 1078 阅读

shell脚本（函数定义及参数调用）

函数的定义及参数调用函数是完成特定功能的代码片段，在shell中定义函数可以使用代码模块化，便于调用，函数必须先定义才可以使用。一、定义函数的方式方法一：函数名() { 函数要实现的功能代码}方法二：function 函数名 { 函数要实现的功能代码}二、调用参数函数名变量函数名变量重新

shell脚本

函数

原创 2019-06-24 22:04:39 10000+阅读 2点赞

shell脚本（shopping小游戏）

需求：共有5家商店，逐个逛，买商品则打印商品信息，记录每次购买的金额。逛完5家商店给予总金额输出分析：大循环逛5家商店，小循环询问是否购买商品，每次买完，对商品价格累加。#!/bin/bash #打印商品价格函数 info() { printf " Price list 1、hat 50￥ 2、shoes 200￥ 3、

shell脚本

购物小游戏

原创 2019-06-23 14:57:25 1428 阅读

awk小结

awk工作原理介绍awk实际是一种编程语言，我们使用的是的GUN版本，主要使用其强大的分割，过滤功能,awk实际也是对文件进行逐行处理awk工作状态分为以下三种GEGIN{}{}END{}行处理前行处理中行处理后++++++小示例++++++++awk'BEGIN{print1/2}{print"ok"}END{print"------------------"}'/etc/passwd即为行处理

awk

原创 2019-06-23 13:08:13 543 阅读

shell脚本（猜数字小游戏）

shell脚本猜数字小游戏要求：给用户三次机会，猜10以内的任意数字分析：10以内的随机数要用到RANDOM，循环给予用户三次机会，用if做判断是否等于RANDOM的值#脚本如下#!/bin/bash ###################### #shell脚本猜数字小游戏 ##################### info() { pr

shell脚本

猜数字小游戏

原创 2019-06-21 18:09:11 1424 阅读

shell脚本（简易跳板机）

#!/bin/bash ####################### #linux jump-server ######################## #忽略键盘输入的一些信号 #linux键盘信号详细请看： trap "" HUP INT OUIT TSTP #写一个函数，里面有我们需要打印的提示信息，方便调用 info() { printf " ==================

shell脚本

jump-server

原创 2019-06-21 17:21:38 1036 阅读 1收藏

sed命令和正则表达式

sed命令和正则表达式sed是一种在线的，非交互式的编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，成为模式空间，接着用sed命令处理缓冲区的内容。处理完，把缓冲区的内容送往屏幕。sed支持正则表达式与grep一样，sed在文件中查找模式时也可以使用正则表达式（RE）和各种元字符。正则表达式是括在斜杠间的模式，>用于查找和替换，以下是sed支持的元字符使用基本元字符集^

sed

正则表达式

原创 2019-06-21 16:34:08 4044 阅读 1收藏

grep和正则表达式

grep和正则表达式1、grep命令格式grep[选项]patternfilenamefilename.....#grep'Tom'/etc/passwd#grep‘bashshell’/etc/passwd找到：grep返回的退出状态为0没找到：grep返回的退出状态为1找不到指定文件：grep返回的退出状态为2grep程序的输入可以来自标准输入或管道，而不仅仅是文件，例如：#grep'tom'

正则表达式

grep

原创 2019-06-19 20:35:37 474 阅读

shell脚本（多线程批量创建用户）

shell脚本中的多线程很多场景中会用到多线程，例如备份数据库，有100个库，正常备份效率极其低下。有了多线程原本可能需要10个小时备份，现在分10个线程同时去干，只要一个小时就解决了。今天就介绍下shell中如何使用多线程去完成一些操作，提高我们的效率。首先我们需要了解以下一些知识点：1、文件描述符[root

shell脚本

多线程

文件描述符

命名管道

原创 2019-06-19 17:21:42 989 阅读

shell脚本（批量创建用户）

shell脚本批量创建用户有些面试题中会问到批量创建用户的题目，大体是用循环去进行创建，但有时也会有一些额外的附加条件，一起来看看今天的知识点吧。需求：1、自定义用户，不要有特殊字符：user01,user022、最多创建100个用户，要求数字等位对齐。例：1-99 01，02，03

shell脚本

批量创建用户

原创 2019-06-19 15:34:44 1987 阅读

shell脚本（3次机会探测主机存活）

shell脚本给予三次机会探测主机是否存活之前的文章中写道使用for和while循环配合ping程序探测主机是否存活，但每个IP只ping了一次，本次结合数组等，给予三次机会探测主机存活。同样的，文本中有我们需要探测的主机IP，我们需要给予每个IP三次机会去使用ping程序。[root@localhos

shell脚本

原创 2019-06-18 17:16:36 1502 阅读

shell脚本（数组）

数组的类型之前说到变量的定义，一个变量代表一个值，一个字符串，一个命令等等。但变量中只有一个值，而数组中可以包含多个值，并且拥有对应的索引。以下举例进行说明，让我们了解到什么是数组。#定义变量namename=dingxiang-------------------------------| d

数组定义

数组索引

原创 2019-06-18 15:23:09 796 阅读

shell脚本（探测主机是否存活）

shell脚本探测主机存活首先我有一些IP地址在文本中，我需要知道他们所在主机是否存活[root@localhost shell]# cat ip.txt 47.102.212.9947.102.212.223119.3.103.33225.17.221.123方法一：使用for循环#!/bin/bash

shell脚本

ping

探测主机是否存活

原创 2019-06-17 22:32:59 2378 阅读 1收藏 3评论

官方博客	全部文章	热门标签	班级博客
了解我们	在线客服	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	汽车开发者社区

51CTO博客

走了多远，又是多远

Docker-compose部署ELK

ELK--grok正则分析日志与多日志收集

elasticserach基本使用

ELK6.6搭建

gitlab上传公钥和项目代码

gitlab创建项目及分支

gitlab添加邮箱设置

gitlab代码版本管理（安装）

Nginx之动静分离配置

Nginx配置https

nginx配置文件

Nginx高并发之IO模型

shell脚本（系统工具箱V2）

shell脚本（zabbix监控mysql数据库）

shell脚本（保留最近N天的备份）

shell脚本（删除7天之前的文件）

awk与nginx日志分析

shell脚本（使用数组统计数据）

shell脚本（函数定义及参数调用）

shell脚本（shopping小游戏）

awk小结

shell脚本（猜数字小游戏）

shell脚本（简易跳板机）

sed命令和正则表达式

grep和正则表达式

shell脚本（多线程批量创建用户）

shell脚本（批量创建用户）

shell脚本（3次机会探测主机存活）

shell脚本（数组）

shell脚本（探测主机是否存活）