一、基本介绍1、ElestaicSearch为开源搜索引擎，负责数据的存储及搜索2、kibana为开源工具，提供界面给用户进行搜索操作3、fileBeat为开源工具，是文件数据收集器4、EFK工作基本原理在部署服务的服务器节点安装fileBeat，通过路径配置使得fileBeat对指定服务日志文件的数据进行收集->收集的数据会传输到ElestaticSearch进行存储->用户通过浏览
转载
2024-02-21 21:14:25
61阅读
Kibana 安装
– kibana 的安装非常简单,我们使用 rpm 方式安装
rpm –ivh kibana-4.5.2-1.x86_64.rpm
– kibana 默认安装在 /opt/kibana 下面,配置文件在
/opt/kibana/config/kibana.yml
– 我们只需要修改少量的配置就可以启动
kibana.yml 的配置
vim /opt/kibana/config/kibana.yml
server.port: 5601
server.host: "0.0.0.0"
elasticsearch.url: "http://192.168.4.13:9200"
kibana.index: ".kibana"
kibana.defaultAppId: "discover"
elasticsearch.pingTimeout: 1500
elasticsearch.requestTimeout: 30000
elasticsearch.startupTimeout: 5000
– 除 elasticsearch.url 需要配置为我们 ES 集群的地址之外
原创
2018-08-17 09:41:14
508阅读
点赞
目录一、介绍二、安装JDK三、安装Elasticsearch四、安装Logstash五、安装Kibana六、Kibana简单使用系统环境：CentOS Linux release 7.4.1708 (Core)当前问题状况开发人员不能登录线上服务器查看详细日志。各个系统都有日志，日志数据分散难以查找。日志数据量大，查询速度慢，或者数据不够实时。一、介绍1、组成ELK由Elasticsearch、L
转载
2024-02-28 08:54:17
146阅读
引言filebeat是轻量级的日志收集工具，本小节我们就开始filebeat组件的搭建。filebeat组件的搭建也是我们elk集群搭建过程中的最后一小节内容，本节除了有关于filebeat的搭建过程，我们也会完整的演示一个elk集群收集日志的示例，从而验证我们整个elk集群是否能够正常工作。开始正文。正文拉取镜像命令：docker pull elastic/filebeat:7.11.1启动fi
转载
2024-04-03 12:42:47
31阅读
场景 一般常见我们需要进行日志分析场最是：直接在日志文件中grep. awk就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢怎么办，如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统，将所有节点上的日志统收集，管理，访问。 大型系统是个分布式部署的架构，不同的服务模块部署在不同的服务器上
转载
2024-04-30 11:55:08
146阅读
ELK搭建一、elasticsearch环境安装：node1和node2都装上rpm--importhttps://packages.elastic.co/GPG-KEY-elasticsearch#安装yum源cat>>/etc/yum.repos.d/elaticsearch.repo<<EOF[elasticsearch-2.x]name=Elasticsearchr
原创
2019-06-09 20:29:20
1795阅读
elk 平台搭建:ELK平台搭建系统环境System: Centos release 6.7 (Final)ElasticSearch: 2.1.0Logstash: 2.1.1Kibana: 4.3.0Java...
转载
2016-07-26 17:39:00
159阅读
2评论
ELK与我我在2017年8月份第一次听说ELK并搭建了一次，当时看到KIBANA页面超级炫酷非常激动。现在已经过去了四个月了，现在的情况不像刚开始哪有无知了。现在是要应用到实际的项目中。首先说一下整个ELK的社区非常全面，使用Logstash的各种插件可以扩展得非常强大。构建日志监控分析，用户行为分析，服务异常邮件告警等等。我今天写这篇文章也是为了督促自己尽快拿下ELK，我上周面试的时候就被考了i
之前的日志收集工作一直由前端完成，前端通过数据埋点将数据上传友盟，但是这种方式无法针对用户访问轨迹进行分析，为了满足对用户行为轨迹进行分析，决定通过后端增加数据埋点的方式来手机日志。后端原先就有记录日志，不过由于每个开发人员开发习惯不同，对于日志记录格式也有差异。因此第一步要做的不是去搭建ELK，而是要先规范日志格式，在必要节点增加数据埋点（要知道ELK也不是万能的，它无法感知我们的日志格式，因此
转载
2024-03-15 19:34:27
63阅读
elasticsearch、logstash、kinaba学习
原创
2019-03-25 00:01:39
1343阅读
点赞
elk 平台搭建:ELK平台搭建系统环境System: Centos release 6.7 (Final)ElasticSearch: 2.1.0Logstash: 2.1.1Kibana: 4.3.0Java: openjdk version "1.8.0_65"注：由于Logstash的...
转载
2016-07-26 17:38:00
131阅读
前言在前篇文章简单介绍ELK和相关的组件ELK架构介绍，在写这篇文章之后本来是不打算搭建ELK的，过了几天吧，公司测试小哥说要看项目日志，而我们后端开发是按模块开发的，所以日志不集中，也没有统一部署到测试服务器上，那么正好找个借口帮公司搭建ELK日志收集系统！ELK搭建1.ELK架构介绍2.ElasticSearch搭建3.Kibana搭建4.ElasticSearch-head搭建5.Logstash搭建6.Kafka搭建7.Kafka-manager搭建8.Filebeat搭建搭建
原创
2022-12-01 17:19:12
91阅读
[TOC] 一、配置JAVA环境变量 bash mkdir /usr/local/java/ –p cd /usr/local/java/ tar zxvf /data/elk5.0/jdk 8u111 linux x64.tar.gz cat /etc/profile chkconfig: 234
搭建ELK
原创
2018-05-08 14:10:02
10000+阅读
点赞
2评论
elk系统全部采用5.0版本1、elk是依赖于java环境，所以要先安装jdk，主意elk5.0版本所需要的jdk必须在1.8以上2、安装elasticsearchyum -y install elasticsearch-5.0.1.rpm
mkdir -pv /elk/{data,logs} &nbs
原创
2017-03-30 16:13:44
3897阅读
ELK环境部署基础环境系统：Centos7.3防火墙、selinux：关闭机器环境：至少两台192.168.1.182elk-node1192.168.1.183elk-node2Master-slave模式机器环境：jdk1.8+，nginx或apache下载并安装GPGKeyrpm--importhttps://packages.elastic.co/GPG-KEY-elasticsearch
原创
2019-01-11 10:05:48
1572阅读
记录一下自己第一次搭建elk环境，有几个坑，务必注意一下。 1、elasticsearch和analysis版本要一致，本次选用的版本是7.6.2； 2、搭建过程中一定要仔细阅读教程， 本来五分钟搞定的事情，硬是给我搞了几个小时，之前从来没接触过，被迫上手了 首先要把自己需要的镜像下载下来 dock ...
转载
2021-07-26 23:28:00
389阅读
2评论
文章目录一、ELK 是什么？二、安装部署 Elasticsearch1、下载2、解压到指定目录3、修改配置文件4、新建用户并赋权5、切换至新建的用户并启动 Elasticsearch错误处理6、验证三、安装部署 Kibana1、下载2、解压并移动到指定目录3、修改配置文件4、授权并切换用户5、启动 Kibana6、在浏览器中访问 Kibana四、安装部署 Logstash1、下载安装包2、解压并
转载
2023-11-06 20:35:06
619阅读
文章目录一、ELK简介1、认识ELK2、ELK架构图3、ELFK架构ELFK架构图二、ELK伪分布式日志平台搭建搭建流程1、在相应容器下载所需要软件2、安装Elasticsearch3、解决Elasticsearch启动报错4、安装Kibana5、安装Logstash三、ELK收集标准输入日志，并在web界面显示四、收集discuz论坛的访问日志五、阿里云+腾讯云主机实现ES集群 作为运维人员
转载
2024-03-29 13:49:43
2351阅读
点赞
日志主要包括系统日志、应用程序日志和安全日志等。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及故障发生的原因。分析日志可以了解服务器的负荷，性能安全性，从而及时采取措施纠正错误，因此日志的重要性不言而喻。但是，在系统分布式后，日志通常被分散的储存不同的设备上。比如当系统为数十上百台服务器，必须依次登录每台机器的传统方法查阅日志，这样很繁琐和效率低下。因此日志的集中化管理
转载
2024-07-19 11:36:48
73阅读
