ELK日志分析之安装1.介绍：NRT elasticsearch是一个近似实时的搜索平台，从索引文档到可搜索有些延迟，通常为1秒。集群 集群就是一个或多个节点存储数据，其中一个节点为主节点，这个主节点是可以通过选举产生的，并提供跨节点的联合索引和搜索的功能。集群有一个唯一性标示的名字，默认是elasticsearch，集群名字很重要，每个节点是基于集群名字加入到其集群中的。因此
（注：此文档仅限Windows 10环境下ELK环境搭建）ELK安装–win10一、前期准备 java : jdk11（须有环境变量配置path） elasticsearch-7.2.0.zip logstash-7.2.0.zip kibana-7.2.0.zip elasticsearch-head-master.zip filebeat-7.2.0.zip （注：java版本要与ELK相对
转载
2024-04-07 05:54:12
92阅读
日志流向:kafka-->logstash-->Elasticsearch-->Kibana或者filebeat-->Elasticsearch-->KibanaLogstash配置:kafka-->logstash-->Elasticsearch官网配置:https://www.elastic.co/guide/en/logstash/current/c
转载
2024-04-24 12:50:08
26阅读
简介：ELK是（Elasticsearch、Logstash、Kibana）三个软件的集合简称。那么这三个软件分别扮演着一个什么样的角色呢？ 1）Elasticsearch：搜索引擎，主要任务是将日志索引并进行存储。 2）Logstash：通俗来讲就是一个中间者，负责将日志进行收集、过滤并转发，转发给谁呢？在没有特殊配置的情况下转发给Elasticsearch进行处理。 3)Kibana：可视化展
转载
2024-03-08 21:09:01
67阅读
4核4G配置)： 按上表准备好服务器后，对所有服务器节点的操作系统内核由3.10升级至5.4+(Haproxy、Keepalived和Ceph存储等需要用到)，步骤如下：#导入用于内核升级的yum源仓库ELRepo的秘钥
rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org
#启用ELRepo仓库yum源
rpm -U
转载
2024-07-11 14:33:41
73阅读
目录一、ELK日志分析系统1、ELK的三大组成2、ELK日志处理步骤二、Elasticsearch的核心1、接近实时（NRT）2、集群（cluster）3、节点（node）4、索引（index）5、类型（type）6、文档（document）7、分片和副本（shards & replicas）8、相关概念在关系型数据库和ElasticSearch中的对应关系三、Logstash1、Logs
转载
2024-04-05 10:16:37
85阅读
在学习如何实现"k8s elk xpack"之前，我们首先需要了解这三个关键词的含义和作用。K8S指的是Kubernetes，是一个开源的容器编排引擎，用于自动化部署、扩展和管理容器化应用程序。ELK指的是Elasticsearch、Logstash和Kibana的组合，用于日志收集、存储和展示。而X-Pack是Elastic Stack的商业扩展，提供了更多的安全、监控和管理功能。
实现"k8
原创
2024-03-07 10:30:00
130阅读
前言：大概一年多前写过一个部署ELK系列的博客文章，前不久刚好在部署一个ELK的解决方案，我顺便就把一些基础的部分拎出来，再整合成一期文章。大概内容包括：搭建ELK集群，以及写一个简单的MQ服务。如果需要看一年多之前写的文章，可以详见下列文章链接（例如部署成Windows服务、配置浏览器插件、logstash接收消费者数据等，该篇文章不再重复描述，可以点击下方链接自行参考）：ElasticSear
文章目录一、什么是ELK?1.什么是Elasticsearch？2.什么是 Logstash？3.什么是 是 kibana ：二、ELK 常用架构及使用场景介绍：1）简单架构2）以Logstash 作为日志搜集器3）以Beats 作为日志搜集器4）引入消息队列模式三、Elasticsearch 部署1.部署源码安装：docker安装安装地址2.rpm包安装1）节点规划2)系统优化3）下载安装包4
转载
2024-04-06 10:15:22
103阅读
一、简介公司又来了，这次的任务是搭建elk。好吧，好像很多博客都是在工作中写出来的。本来以为两行命令搞定的事情，坑没那么多的，结果。。。 二、安装与启动ElasticSearch链接：https://www.elastic.co/downloadselk都有，各个系统版本都有，全家桶，要啥有啥。到自己的服务器上执行$ wget https://artifacts.elastic.co/d
转载
2024-04-06 09:22:01
54阅读
功能开关在安装XPack后，有些功能我们可以通过以下配置进行功能开关：Monitoring(免费版本只支持单 ES 集群)查看 ES 集群的 health：集群级别：Uptime ： 集群运行时间；节点级别：Disk Available：可用磁盘；JVM Heap： JVM 使用情况；索引级别：Indices：索引数量，相当于数据库数；Documents：文档数量，相当于记录数；Disk Usag
转载
2024-02-21 14:12:41
93阅读
文章目录CentOS 7 搭建ELK 7.13.2 环境一、软件清单二、安装1.安装ELK2.安装插件3.安装elasticsearch-head4.安装filebeat (应用端)5.安装metricbeat(应用端-可选)三、配置1.主机名配置2.环境变量配置3.配置elasticsearch4.配置kibana5.配置logstash6.防火墙配置7.开机启动四、启动和关闭1.启动和关闭e
转载
2024-05-16 12:41:47
45阅读
目录一、概述二、前期准备1）部署 docker2）部署 docker-compose三、创建网络四、Zookeeper 编排部署1）下载 Zookeeper2）配置3）启动脚本 bootstrap.sh4）构建镜像 Dockerfile5）编排 docker-compose.yaml6）开始部署五、简单测试验证六、常用的 zookeeper 客户端命令1）创建节点2）查看节点3）更新节点4）删除节
转载
2024-04-07 17:29:39
66阅读
之前写过一篇 设置的，感觉不大对。ELK elasticsearch7 设置账号、权限 还是重新配置一下。 准备资料：elasticsearch7.1.1、kibana7.1.1镜像文件。 在docker下成功安装集群。注意的是，所有的需要安装es相关的ELK版本都要一致，甚至es的插件版本也都是要
原创
2023-03-19 01:41:09
1594阅读
title: ElasticSearch索引管理 date: 2022-08-31 00:00:00 tags:ElasticSearch索引管理 categories:ElasticSearch索引操作创建索引手动创建索引，可以在请求中加入所有设置和类型映射，例如：PUT /mytest3
{
"settings": {
"number_of_shards": "3",
转载
2024-07-07 10:25:40
288阅读
文章目录0, 证书过期的问题1，生成ssl证书2，配置ES使用ssl证书0, 证书过期的问题证书过期后，客户端或节点无法验证证书的有效性（如签名过期、信任锚失效），会触发 PKIX path validation failed或 CertificateExpiredException等错误，导致加密连接中断。此时，集群内部的节点认证（如传输层通信）和外部客户端的访问（如 HTTP 请求）均会失败证
cluster.name: elasticsearch配置的集群名称，默认是elasticsearch，es服务会通过广播方式自动连接在同一网段下的es服务，通过多播方式进行通信，同一网段下可以有多个集群，通过集群名称这个属性来区分不同的集群。node.name: "node-01"当前配置所在机器的节点名，你不设置就默认随机指定一个name列表中名字，该name列表在es的jar包中config
转载
2024-02-13 12:51:17
83阅读
elasticsearch7.X x-pack破解使用权限和告警等功能简介： x-pack是elasticsearch的一个收费的扩展包，将安全，警告，监视，图形和报告功能捆绑在一个易于安装的软件包中，x-pack被设计为一个无缝的工作，但是你可以轻松的启用或者关闭一些功能。如果购买商业版需要每年支付十多万。为了使用几个不可或缺功能而花大钱去购买，有点不值得，特别是对于中小型企业来说。所
文章目录一、介绍二、启动xpack1、启用xpack前，查看es日志显示license 为basic2、执行以下命令，再次查看es日志显示license 已变为trial3、elasticsearch-setup-passwords命令用法4、在ES的bin目录下执行./elasticsearch-setup-passwords interactive5、如果执行过一次就不能再执行了，你可以从K
转载
2024-03-25 15:11:30
143阅读
1. 部署elasticsearch6.2.4+kibana6.2.4+xpack6.2.4集群示例节点：192.168.1.001、192.168.1.002、192.168.1.003 要准备的安装包：elasticsearch、kibana、x-pack（尽量保持同一个版本） 以下步骤若非特别指出，均需要在所有节点执行一次1.1. 配置ES1.1.0访问地址集群名称：group-es节点no
转载
2024-05-21 20:03:13
382阅读
