ELK(12)：ELK+kafka(日志不太多)我们先用logstash读取Nginx日志和系统日志写入kafka，再用logstash读取出来写入elasticsearch，适合日志量不是太多的架构。海量日志建议采用filebeat。其实用redis也可以，redis没必要开快照和持久化，数据写入es后redis的作用就完成了。当然很耗redis内存，一般8-16G。后端可能几十台logstas
转载
2023-07-20 14:12:55
79阅读
Docker快速安装wgethttp://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo-O/etc/yum.repos.d/docker-ce.repoyuminstalldocker-ce-y//启动servicedockerstart//设置开机启动systemctlenabledocker//国内镜像源设置https://b
原创
2020-12-02 09:32:19
391阅读
使用docker-compose安装redis1、创建目录并给权限2、redis.conf配置文件3、编辑docker-compose.yml文件 1、创建目录并给权限你想安装的路径，我这里就是放在了/home/redis/里了。mkdir -p /home/redis/data /home/redis/logs /home/redis/conf
chmod -R 777 /home/redis
转载
2023-06-08 15:56:54
173阅读
Elastic Stack写在前面：最近在linux搞完elk之后，考虑到以后的可移植性和可操作性，决定改用使用docker容器重新再搞一遍。elasticsearch+elasticsearch-head-logstash+filebeat。一、了解docker 1、什么是docker Docker 是一个开源的应用容器引擎，基于 Go 语言 并遵从 Apache2.0 协议开源。 Docker
转载
2023-08-18 16:55:55
93阅读
前言本篇文章主要介绍在两台机器上使用 Docker 搭建 ELK。正文环境CentOS 7.7 系统Docker version 19.03.8docker-compose version 1.23.2系统设置vim 编辑 /etc/security/limits.conf，在末尾加上：* soft nofile 65536
* hard nofile 65536
* soft nproc 409
转载
2023-07-25 09:29:47
218阅读
# 实现ELK Docker教程
## 介绍
在本教程中，我将向你展示如何使用Docker来搭建一个ELK（Elasticsearch、Logstash和Kibana）堆栈。ELK堆栈是一个流行的日志分析平台，可以帮助你收集、分析和可视化大量的日志数据。
作为一名经验丰富的开发者，我将带领你完成以下步骤：
1. 搭建Elasticsearch容器
2. 搭建Logstash容器
3. 搭建
原创
2023-09-16 11:09:14
40阅读
# 使用Docker搭建ELK Stack
## 1. 介绍
在本文中，我们将学习如何使用Docker来搭建ELK Stack（即Elasticsearch、Logstash和Kibana）。ELK Stack是一套用于日志管理和分析的开源工具。它由以下三个组件组成：
- Elasticsearch: 用于存储、搜索和分析大规模数据的分布式搜索引擎。
- Logstash: 用于收集、过滤和转
原创
2023-08-29 06:55:11
41阅读
ELK日志系统搭建一、ELK日志系统简介ELK是三个开源软件的缩写，分别表示：Elasticsearch , Logstash, Kibana , 它们都是开源软件。目前新增了一个FileBeat，它是一个轻量级的日志收集处理工具，Filebeat占用资源少，适合于在各个服务器上搜集日志后传输给Logstash，当前，官方也推荐使用此工具。  
转载
2023-12-06 23:48:19
463阅读
Docker Compose 是Docker官方编排（Orchstration）项目之一，负责快速在集群中部署分布式应用。 Dockerfile可以让用户管理一个单独的应用容器；而Compose则允许用户在一个模板（YAML格式）中定义一组相关联的应用容器（被称为一个project，即项目），如一个Web服务器再加上后端的数据库服务容器等。 1、安装Docker 2
转载
2023-05-29 15:42:18
177阅读
Docker-Compose部署ELK(保姆级教程)部署elk创建目录 和文件配置docker-compose并启动打开kibana1.创建docker-elk目录 （此目录任意 推荐使用此 否则需要更改compose配置）sudo mkdir /opt/docker_elk2.创建logstash配置文件sudo mkdir /opt/docker_elk/logstash
sudo touch
转载
2023-10-05 20:26:35
471阅读
centos7+docker+elk详细部署本文为纯容器化部署elk,同步破解x-pack1、操作系统相关设置： 关闭防火墙：setenforce 0
systemctl stop firewalld
systemctl disable firewalld设置操作系统参数：sysctl -w vm.max_map_count=6553600永久生效将配置写入/etc/sysctl.conf 然后s
转载
2023-11-26 15:53:37
10阅读
目录安装前工作开始安装elasticsearch1.查找镜像2.下载镜像3.配置外部映射文件4.启动镜像映射外部配置文件安装ElasticSearch-Head1.拉取镜像2. 启动3. 查看是否启动成功4. 浏览器访问,跨域问题在前面就解决了所有可以直接访问安装Kibana1. 拉取镜像2. 配置外部映射文件3. 运行镜像4. 浏览器访问安装logstash并同步mysql数据到ES1.拉取镜
转载
2023-08-18 16:56:07
143阅读
点赞
1评论
引言前面的小节中我们已经独立成节，详细介绍了elk集群的搭建过程，本节将是我们elk集群搭建的终结篇。在本节中，我们的所有服务都是通过docker-compose一键式搭建，所有的服务都是在一个docker-compose的配置文件中维护。这样我们的整个服务都可以通过docker-compose命令进行一键式管控。我们的镜像也采用最新的镜像，elk的版本选取7.12.0版本的镜像。本节内容中，我们
转载
2023-12-03 15:27:32
218阅读
配置篇1.docker安装配置#yum更新到最新
yum update
#安装依赖包
yum install -y yum-utils device-mapper-persistent-data lvm2
#设置yum源
yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
#查看
转载
2023-09-16 11:05:23
264阅读
1、docker 环境搭建Docker 安装1.安装yum-utils：yum install y yum utils device mapper persistent data lvm22.为yum源添加docker仓库位置：yum config manager add repo https://download.docker.com/linux/centos/docker-ce.repo3.安
转载
2023-07-11 09:38:13
477阅读
ElasticSearch的部署一 Linux环境部署首先到官网下载ElasticSearch安装包:下载地址:https://www.elastic.co/cn/downloads/elasticsearch, 该页面有各个平台下载链接,其中Linux平台有.tar和.rpm两种格式
这里我们以.tar格式为例,首先登陆Linux系统执行命令cd /opt 进入opt目录,再执行命令mkdir
转载
2023-07-09 12:54:49
130阅读
安装 Filebeat 已经完全替代了 Logstash-Forwarder 成为新一代的日志采集器，因为它更加轻量、安全。基于 Filebeat + ELK 的部署方案架构图如下： 软件版本：服务版本说明CentOS7.6Docker18.09.5Docker Compose1.25.0ELK7.5.1Filebeat7.5.1docker-compose 文件version:
转载
2024-02-24 18:24:24
70阅读
一 简介在上一篇中介绍了elk安装和收集日志，这一篇我们在中间加个数据库，让filebeat直接把日志发送给redis,然后logstash在去redis里面取出来大致流程:filebeat---redis---logstash---es--kibana二 redis安装下载 https://redis.io/download三 logstash配置用redis，配置文件需要更改一下[root@
原创
2021-04-18 17:42:09
10000+阅读
# ELK Redis部署教程
## 1. 概述
本文将教会你如何使用ELK（Elasticsearch, Logstash, Kibana）和Redis来进行日志的收集、分析和可视化。ELK是一套开源的日志分析平台，Redis是一个高性能的内存数据库和消息队列。
## 2. 环境准备
在开始部署ELK和Redis之前，你需要确保以下几个环境的准备工作已完成：
- 一台具有足够计算和存储资源
原创
2023-10-14 09:19:27
67阅读
用dcoker 快速搭建elk
原创
2023-03-10 19:04:30
174阅读
