filebeat收集docker日志

原创

mob649e815e258d 2024-10-25 07:00:33 ©著作权

文章标签 Docker Elastic bash 文章分类 Docker 云计算

©著作权归作者所有：来自51CTO博客作者mob649e815e258d的原创作品，请联系作者获取转载授权，否则将追究法律责任

使用 Filebeat 收集 Docker 日志的完整指南

在现代应用程序开发中，日志收集至关重要。Filebeat 是 Elastic Stack 中的轻量级日志采集器，能够轻松地收集和转发 Docker 日志。本文将引导你完成从配置 Filebeat 到验证日志收集的整个过程。

流程概述

以下是使用 Filebeat 收集 Docker 日志的基本步骤：

步骤	操作
1	安装 Filebeat
2	配置 Filebeat
3	启动 Filebeat
4	验证日志收集

详细步骤

步骤 1: 安装 Filebeat

首先，你需要在你的系统上安装 Filebeat。以 Ubuntu 为例，使用以下命令安装：

# 下载并安装 Filebeat
wget 
sudo dpkg -i filebeat-7.17.8-amd64.deb

注释：上述命令下载了指定版本的 Filebeat，并安装到系统中。

步骤 2: 配置 Filebeat

配置 Filebeat 是至关重要的一步。你需要编辑 Filebeat 的配置文件 filebeat.yml。

# 打开 Filebeat 配置文件
sudo nano /etc/filebeat/filebeat.yml

在文件中添加以下内容：

filebeat.inputs:
  - type: docker
    containers:
      path: "/var/lib/docker/containers"
      stream: "all" # 收集所有流的日志
      json:
        overwrite_keys: true # 替换 JSON 键
        add_locale: false # 不添加区域设置
        fields:
          app_name: "your_app_name" # 应用名称

output.elasticsearch:
  hosts: ["localhost:9200"] # Elasticsearch 地址

注释：

filebeat.inputs: 指定日志输入来源，这里我们选择 Docker 容器。
path: Docker 容器日志文件的存储路径。
output.elasticsearch: 配置输出到 Elasticsearch 的地址。

步骤 3: 启动 Filebeat

完成配置后，你需要启动 Filebeat 服务。

# 启动 Filebeat 服务
sudo systemctl start filebeat

# 设置 Filebeat 在启动时自动运行
sudo systemctl enable filebeat

注释：以上命令启动 Filebeat 服务，并设置其在系统启动时自动运行。

步骤 4: 验证日志收集

要验证 Filebeat 是否成功收集了 Docker 日志，你可以使用以下命令查看 Filebeat 的运行状态：

# 查看 Filebeat 日志
sudo journalctl -u filebeat

注释：此命令将显示 Filebeat 的运行日志，你可以通过查看日志确认是否有错误并确保日志已成功发送到 Elasticsearch。

角色关系示意图

以下是 Filebeat 及其与 Docker 和 Elasticsearch 之间的关系示意图：

classDiagram
    class Filebeat {
        +start()
        +stop()
        +configure()
    }

    class Docker {
        +run()
        +stop()
        +log()
    }

    class Elasticsearch {
        +index()
        +search()
    }

    Filebeat --> Docker : Collects logs
    Filebeat --> Elasticsearch : Sends logs