文章目录引言第一部分:Loki 简介与安装1.1 Loki 简介1.2 Loki 安装1.2.1 下载 Loki1.2.2 安装 Loki1.3 启动 Loki第二部分:Promtail 简介与安装2.1 Promtail 简介2.2 Promtail 安装2.2.1 下载 Promtail2.2.2 安装 Promtail2.3 启动 Promtail第三部分:Grafana 配置与可视化3.
转载 2024-07-19 11:38:03
77阅读
目录 文章目录目录1. 概述2. 切割方式介绍3. 使用logrotate工具+系统自带的crontab命令3.1 安装logrotate工具3.2 查看logrotate的配置文件3.3 logrotate配置文件详解3.4 查看logrotate默认执行时间3.5 编写定时任务4. 编写Shell 脚本+系统自带的crontab 命令4.1 编写Shell 脚本4.2 编写定时任务 1. 概述
influxdb InfluxDB 是一个开源分布式时序、事件和指标数据库。使用 Go 语言编写,无需外部依赖。其设计目标是实现分布式和水平伸缩扩展。 influxDB启动流程: 1  用docker下拉influxdb的镜像 docker pull tutum/influxdb docekr 2 Docker环境下运行influxdb docker run -d -p
开始首先把我们要采集的日志拿出来,大概这个样子123.131.xx.xxx 307 0.012 [2018-01-16T10:42:50+08:00] POST /login HTTP/1.1 - 0 ....... 121.19.xx.xx 200 0.010 [2018-01-16T10:42:51+08:00] GET / HTTP/1.1 - 4228 ........ 120.221.x
src=(s1,s2,s3,s3) for i in ${src[@] nginx访问量统计 1.根据访问IP统计UV awk '{print $1}' access.log|sort | uniq -c |wc -l嘉图的统计 awk '{print $1}' /var/log/nginx/access.log|sort | uniq -c |wc -l 2.统计访问URL统
转载 2024-08-12 13:31:28
75阅读
nginx日志格式修改1、Nginx支持自定义输出日志格式,在设置Nginx日志格式前,需要了解一下nginx内置的日志变量。log_format main escape=json '{"accessip_list":"$proxy_add_x_forwarded_for",' '"remote_addr":"$remote
转载 2024-04-08 08:47:27
254阅读
最近客户有个新需求,就是想查看网站的访问情况,由于网站没有做google的统计和百度的统计,所以访问情况,只能通过日志查看,通过脚本的形式给客户导出也不太实际,给客户写个简单的页面,咱也做不到成熟的日志解决方案,那就是ELK,还有现在比较火的Loki,(当然还有很多其他解决方案,比如Splunk、Datadog等),那我们这个小网站,小体量,必然是选择Loki来做所以这次就采用Nginx+Prom
原创 2023-08-15 15:01:32
424阅读
场景:  这几天趁着机考,面试比较少,帮老师把项目的东西做一做(今年找工作太难了,┭┮﹏┭┮)。由于这个项目需要分布式部署多台服务器,多个数据库,后端程序分开部署,日志不好查找。而且每次不能及时的发现错误日志日志不能进行报警通知等。还有就是之后师弟可能不怎么会看日志,找日志,于是搭建轻量级日志系统。  日志系统可以有很多,ELK,loki等,loki具有轻量级,查找快速,存储压缩等特点,适用于中
转载 2024-03-04 15:06:08
440阅读
文章目录一、安装 influxdbⅠ、docker 安装二、常用操作Ⅰ、influxdb 1.x版本添加用户认证Ⅱ、influxdb 2.x 使用命令行Ⅲ、CLI 配置tokenⅤ、CLI 查询测试三、grafana 安装使用Ⅱ、docker 安装 grafana四、grafana 连接 influxⅠ、influx 1.x1、添加数据源2、添加数据3、grafana 测试连接Ⅱ、influx
转载 2024-03-18 19:59:10
111阅读
Loki收集Nginx日志并以grafana展示
原创 2022-06-06 02:06:39
3395阅读
1点赞
原创 2021-07-19 16:17:33
1994阅读
ELK实现nginx日志数据收集,多维度数据展示 一。背景      前端web服务器为nginx,采用filebeat + logstash + elasticsearch + granfa 进行数据采集与展示,对客户端ip进行地域统计,监控服务器响应时间等。 二。业务整体架构:    &nb
转载 7月前
53阅读
Promtail + Loki + Grafana 日志监控系统搭建环境介绍部署应用服务器loki与promtail 安装loki配置文件promtail配置文件启动Grafana安装grafana配置 环境介绍本次搭建环境为centos8,使用两台服务器,其中,机器一为应用服务器,另一台为功能服务器,部署java应用及Promtail ,功能服务器搭建功能为loki+Grafana部署应用服务
转载 2024-06-11 06:52:36
187阅读
介绍日志监控告警系统,较为主流的是ELK(Elasticsearch 、 Logstash和Kibana核心套件构成),虽然优点是功能丰富,允许复杂的操作。但是,这些方案往往规模复杂,资源占用高,操作苦难。很多功能往往用不上,大多数查询只关注一定时间范围和一些简单的参数(如host、service等),使用这些解决方案就有点杀鸡用牛刀的感觉了。所以寻找更轻量级的日志监控系统,所以也就有了EFK(e
转载 2024-02-24 16:44:36
194阅读
?️URL: https://grafana.com/docs/grafana/latest/explore/query-management/?Description:Explore 中的查询管理 为了帮助调试查询,Explore 允许你调查查询请求和响应,以及查询统计数据,...Explore 中的查询管理为了帮助调试查询,Explore 允许你通过查询检查器 (Query Inspector
简介Grafana Labs 简介Grafana 是用于时序数据的事实上的仪表盘解决方案。它支持近百个数据源。 Grafana Labs 想从一个仪表盘解决方案转变成一个可观察性 (observability) 平台,成为你需要对系统进行调试时的首选之地。完整的可观察性可观察性。关于这意味着什么,有很多的定义。可观察性就是对你的系统以及它们的行为和表现的可见性。典型的是这种模式,即可观察性可以分成
我选择了曾经的老朋友Grafana作为基础快速搭建起轻量可扩展的日志系统
原创 2022-09-26 15:16:35
647阅读
ELK 7.10 搭建ELK 7.10 搭建请参考 容器部署ELK7.10,适用于生产Grafana展示Ng
转载 2021-06-28 15:31:36
2091阅读
1 【背景】 前一段时间调研了几款搭建日志分析平台的方式,再系统的操作一下温故一下。 Nginx (engine x) 是一个高性能的HTTP和反向代理web服务器, 同时也提供了IMAP/POP3/SMTP服务。其特点是占有内存少,并发能力强, 事实上nginx的并发能力在同类型的网页服务器中表现较好。
原创 精选 2023-11-23 15:19:34
506阅读
Loki 是一个由Grafana实验室开发的日志聚合工具,专注于存储和查询大规模的日志数据。它与Prometheus一起使用,可以提
原创 精选 2023-12-18 11:05:05
475阅读
  • 1
  • 2
  • 3
  • 4
  • 5