运维记事的博客_ELKStack_51CTO博客

鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

在线学习

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

51CTO博客

首页
关注
排行榜
精品课程
免费直播
软考题库

科目全、试题精、讲解专业，扫码免费刷

搜索历史清空

热门搜索

查看【】的结果
写文章
创作中心
登录注册

# ELKStack

Logstash将解析的日志插入MySQL数据库

1.首先Logstash需要安装logstash-output-jdbc插件（以下方式基于docker）Dockerfile如下:FROMlogstash:7.4.0RUNsed-i's#https://rubygems.org#https://gems.ruby-china.com#g'Gemfile&&logstash-plugininstalllogstash-output-

logstash mysql

原创 2019-10-24 10:48:14 3798 阅读

Logstash解析Nginx访问日志

Nginx日志格式log_formatmain'$remote_addr-$remote_user[$time_local]"$request"''$status$body_bytes_sent"$http_referer"''"$http_user_agent""$http_x_forwarded_for"''"$http_host""$request_time""$upstream_respo

logstash

原创 2019-07-11 23:31:26 5186 阅读

Logstash5.4.1解析日志报错处理

下载最新的logstash5.4.1打开把之前的配置文件加入进去，启动logstash提示报错了，未使用geoip插件的配置文件正常启动。按照提示发现是maxmind的数据库解析出错，重新至maxmind(http://geolite.maxmind.com/download/geoip/database/GeoLite2-City.tar.gz)下载解析即可。说明下之前的配置文件为

geoip

maxmind

logstash

原创推荐 2017-06-08 20:40:00 6373 阅读 5点赞 4评论

PHP通过API搜索elasticsearch只获得10条数据

PHP通过API对ES进行搜索后发现只能获取10条数据，搜索语句如下:{ "query": { "filtered": { "query": { &nbs

php

es

原创 2017-05-11 16:20:07 10000+阅读 1收藏

Kibana更改使用高德地图

目前Kibana自带地图的API不能使用，因为其API开始收费就是如上面所示，现在我们更改为使用高德地图的API。进入到安装目录下的src/ui/public/vislib/visualizations/目录1.编辑_map.js文件//url: 'https://otile{s}-s.mqcdn.com/tiles/1.0.0/map/{z}/{x}/{y}.jpeg', url:&n

kibana

原创 2016-07-22 13:06:49 7095 阅读 1点赞 2收藏 1评论

ELK日志分析分享

相信很多公司都有使用ELK作为运维的日志分析工具，简单、方便、美观，但是却很少有人把自己的分析成果分享出来，以下为我根据公司的具体情况做的dashboard，如果有什么建议或意见欢迎在博客下方评论，以下只针对负载均衡器做了相关分析。1.总体访问情况网站大盘信息，显示的主要就是请求数和IP数，以及失败请求和访问失败的IP和恶意请求数和恶意IP访问失败数：获取的是状态为500-599和404的错误值恶

elk

原创 2016-07-21 10:14:38 8546 阅读 3点赞 3收藏 5评论

利用ELKStack日志平台分析短信攻击

话说互联网的江湖一点都不风平浪静，这不刚处理完http://fengwan.blog.51cto.com/508652/1757465 短信攻击，敌人又卷土重来，而且方法更先进。从上面可以看到敌人通过模拟Referer对我方阵地实施打击，不断耗费我方短信资源。通过对敌人进行画像:分析IP分析X-FORWARD-IP分析设备分析浏览器分析浏览器版本眼前已经一目了然，敌人虽然来自四面八方(不同的IP)

其他

elk

原创 2016-04-19 15:41:45 1268 阅读 1点赞 1收藏

Logstash分析MySQL慢查询日志

最近在使用ELKStack对系统日志进行分析，在网上也有看到有使用logstash的案例，但是发现不能正常解析出来，于是重新花时间去进行正则计算，主要代码如下:input { file { type => "mysql-slow" p

logstash elk

原创 2016-03-31 18:10:32 4417 阅读 1点赞 1收藏

Grok Debugger本地安装过程

最近在使用ELK对日志进行集中管理，因为涉及到日志的规则经常要用到http://grokdebug.herokuapp.com/进行调试，但是因为国内网络的特殊原因网站用到的js文件无法访问，所以经常要使用科学上网才能进行调试，幸好程序已经在github上开源出来了，使得在本地搭建调试环境得以实现1.Ruby的安装yum -y install openss

elk grokdebugger gro

原创 2016-03-31 15:29:30 9876 阅读 3点赞 1收藏 9评论

ELKStack实时分析Haproxy访问日志配置

1.Haproxy配置日志规则在/etc/haproxy/haproxy.conf的frontend下增加option httplog option logasap log LogServerIP local5 capture request header Host len 40 capture

logstash

elk

原创 2016-03-26 16:53:23 8262 阅读 1收藏