ELK环境搭建
1. Virtualbox/Vagrant安装 4
1.1. Virtualbox安装 4
1.2. Vagrant安装 4
1.2.1. 简述 4
1.2.2. Vagrant box 4
1.2.3. 安装配置 5
1.2.4. 常用命令 6
2. ELK安装 6
2.1. CentOS7系统配置 6
2.1.1. 安装iptables 6
1、Grok简介： grok是logstash最重要的插件之一，主要用来通过正则匹配解析
原创
2022-10-13 16:55:27
188阅读
A Beginner’s Guide to Logstash Grok(https://logz.io/blog/logstash-grok/)The ability to efficiently analyz
翻译
2022-09-12 07:21:11
370阅读
默认nginx的访问日志是没有格式的，日志格式如下log_format main '$remote_addr - $rem
原创
2022-08-17 09:22:58
592阅读
通过一个将nginx日志结构化的示例,简单的展示Grok的用法
原创
2019-10-18 14:20:00
4064阅读
点赞
log_format main '$remote_addr [$time_local] "$request" ' '$request_body $status $body_bytes_sent "$http_referer" "$http_user_...
转载
2016-08-29 17:41:00
304阅读
log_format main '$remote_addr [$time_local] "$request" ' '$request_body $status $bo...
转载
2016-08-29 17:41:00
209阅读
2评论
答案如下：# 利用linux自带命令：sort、awk、grep、head、uniq组合得出相应的答案
awk '{print $1}' | grep 'www.xxxx.com' access.log | sort | uniq -c | sort -nr -k1 | head -n 10命令说明awk命令说明 AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫 AWK 是
转载
2024-05-16 04:54:30
36阅读
elk笔记4--grok正则解析1 grok 切分方法2 grok 切分案例3 说明1 grok 切分方
原创
2022-08-29 10:13:44
157阅读
过滤插件：Grok如果业务项目都能够按照json格式输出的话那么处理起来会很容易，那么
原创
2022-08-17 09:09:03
890阅读
介绍Nginx的日志管理是一个重要的功能，它允许用户跟踪和监控Nginx服务器的运行状态和性能。以下是Nginx日志管理的关键点：日志类型：访问日志（Access Log）：记录每个请求的信息，包括客户端IP、请求时间、请求方法、URI、状态码、发送字节数等。通过访问日志，得到用户地域来源、跳转来源、使用终端、某个URL访问量等相关信息。错误日志（Error Log）：记录Nginx服务运行期间发
转载
2024-08-16 18:28:37
119阅读
https://github.com/logstash-plugins/logstash-patterns-core/blob/master/patterns/grok-patterns
原创
2022-05-25 00:56:54
280阅读
通过 nginx 日志做监控一、背景二、采用的中间件TDengine 时序性数据库三、功能实现流程图顶层抽象1、nginx 日志格式配置2、功能抽象监控器业务逻辑日志监控器代码解析器业务逻辑解析器代码四、一些细节1、数据压缩2、缓存3、异步 一、背景在 ToB 的交付项目中，服务器资源比较紧张，即使采用微服务的架构，一般也是所有服务都部署在一台机器上。在这这种背景下，像 prometheus、c
转载
2024-05-16 04:19:37
112阅读
过滤Linux系统登录日志/var/log/secure登陆成功Jan617:11:47localhostsshd[3324]:Receiveddisconnectfrom172.16.0.13:11:disconnectedbyuserJan617:11:47localhostsshd[3324]:pam_unix(sshd:session):sessionclosedforuserrootJa
原创
2019-03-22 10:34:31
2998阅读
点赞
1 管道配置 在kibana上面通过Dev Tools 定义管道 举例如下：PUT _ingest/pipeline/pipeline-nginx-access{ "description" : "nginx access log", "processors": [ { "grok": {
原创
2022-10-13 17:13:14
295阅读
ELK对nginx日志进行流量监控一、前言 线上有一套ELK单机版，版本为5.2.1。现在想把nginx访问日志接入到elk里，进行各个域名使用流量带宽的统计分析。要把nginx日志传输到elk上，可以在存有nginx日志的服务器上使用logstash或者filebeat。但是因为logstash是jvm跑的，资源消耗比较大，启动一个logstash就需要消耗
转载
2024-02-08 14:29:58
71阅读
1、logstash配置文件2、访问nginx，产生新的日志3、查找索引有一条logstash-2019-08-28的索引
原创
精选
2019-08-30 16:10:04
5782阅读
点赞
1.部署前的准备.
准备一台可以通过外网访问的服务器， 域名可以先不用，直接用ip就好 2.在服务器创建一个用户 passwd xxx 设置密码 &
转载
2024-04-11 13:29:59
43阅读
preface 说道分析日志，我们知道的采集方式有2种： 第一种方式是不怎么推荐使用的，除非是在日志量比较小的场景才推荐使用。因为grok非常影响性能的，且不够灵活，除非你很懂ruby。第二种方式是 我们一直推荐使用的架构，讲究松耦合关系。 下面我们还是说说第一种方式，然后再说第二种方式。 grok
转载
2017-08-14 14:17:00
150阅读
2评论
elk之nginx: ignore_older => 86400，不处理一天以前的文件。zjtest7-frontend:/usr/local/logstash-2.3.4/config# cat logstash_agent.conf input { file { ...
转载
2016-08-11 15:13:00
24阅读
