一、glog是什么：Google glog是一个基于程序级记录日志信息的c++库，编程使用方式与c++的stream操作类似，例：LOG(INFO) << "Found " << num << " cookies";“LOG”宏为日志输出关键字，“INFO”为严重性程度。主
转载
2024-09-29 16:18:22
187阅读
Glog是著名google开源C++日志库glog的golang版本，具有轻量级、简单、稳定和高效等特性。 目前被用在大型的容器云开源项目Kubernetes中。 CategoryOverviewUsageSource Code Readingflag.Parse()困境Reference Overview Glog主要有以下特点：支持四种日志等级INFO < WARING < ER
转载
2024-04-30 14:59:27
192阅读
备注：以下内容来自 龙腾测试 - Jmeter + Grafana + InfluxDB 性能测试监控阅读目录1. 安装InfluxDB2. 配置Jmeter3. 安装`Grafana`和`influxDB`数据源配置序章前几天在群里看到大神们在讨论Jmeter + InfluxDB + Grafana监控。说起来Jmeter原生的监控确实太丑了。当年不断安慰自己说“丑一点没关系，只要能用，好用，
转载
2024-06-27 20:35:56
286阅读
轻量级日志分析PLG平台Loki安装部署及使用(promtail+loki+Grafana)Loki简介简介 Loki是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。Loki 是专门用于聚集日志数据，重点是高可用性和可伸缩性。与竞争对手不同的是，它确实易于安装且资源效率极高。特点优点：不对日志进行全文索引（vs ELK技）。通过存储压缩非结构化日
转载
2024-04-22 09:09:31
1418阅读
ogg即Oracle GoldenGate是Oracle的同步工具。 源端和目标端的配置信息：-版本OGG版本源端OracleRelease 11.2.0.1.0Oracle GoldenGate 11.2.1.0.3 for Oracle on Linux x86-64目标端kafka 0.10.1 、confluent 3.1.2Oracle GoldenGate for Big Data
转载
2024-09-23 19:50:22
124阅读
一、Grafana部署及模板展示grafana是一款基于go语言开发的通用可视化工具，支持从不同的数据源加载并展示数据，可作为其数据源的部分储存系统如下所示：TSDB：Prometheus、IfluxDB、OpenTSDB和Graphit日志和文档存储：Loki和ElasitchSearch分布式请求跟踪：Zipkin、Jaeger和TenpoSQL DB：Mysql、PostgreSQL和Mic
转载
2024-03-14 19:34:38
1145阅读
一、简 介Loki是受Prometheus启发由Grafana Labs团队开源的水平可扩展，高度可用的多租户日志聚合系统。 开发语言: Google Go。它的设计具有很高的成本效益，并且易于操作。使用标签来作为索引，而不是对全文进行检索，也就是说，你通过这些标签既可以查询日志的内容也可以查询到监控的数据签，极大地降低了日志索引的存储。系统架构十分简单，由以下3个部分组成 ：Loki 是主服务器
转载
2024-02-28 21:21:07
638阅读
随着公司业务发展，支撑公司业务的各种系统越来越多，为了保证公司的业务正常发展，急需要对这些线上系统的运行进行监控，做到问题的及时发现和处理，最大程度减少对业务的影响。因此有必要引入一套日志监控系统。ELK (Elasticsearch 、 Logstash和Kibana) 是功能丰富，允许复杂的操作。但是，这些方案往往规模复杂，资源占用高，操作苦难，有点杀鸡用牛刀了。PLG (Promtail +
1. 错误日志告警实战1.1. 需求为了更方便的实时了解系统报错情况，我开始寻找告警解决方案1.2. 思路1.2.1. 不差钱的方案如果不差钱，更系统更完善的解决方案，我首先想到的是CAT，它不但能实现错误告警，且更加智能，告警的错误间隔，错误告警内容，QPS告警等等方式更多样化，还能查看接口QPS流量等等，奈何经费有限，放弃1.2.2. 考虑自己实现自己实现考虑可否对log.error方法进行拦
转载
2024-07-15 11:31:22
384阅读
[size=medium]背景：
假设这么一个情况，你是某公司mysql-DBA，某日突然公司数据库中的所有被人为删了。
尽管有数据备份，但是因服务停止而造成的损失上千万，现在公司需要查出那个做删除操作的人。
但是拥有数据库操作权限的人很多，如何排查，证据又在哪？
是不是觉得无能为力？
mysql本身并没有操作审计的功能，那是不是意味着遇到这种情
使用Grafana+loki+promtail入门级部署分布式日志系统(windows环境)环境分布式项目部署在windows环境下，日志分布在多台windows服务器下，日志大、且查询不便。特此搭建分布式日志收集分析查询系统。组件介绍本套分布式日志查询系统使用loki、promtail、grafanaPromtail是代理，负责收集日志并将其发送给Loki。Loki是主服务器，负责存储日志和处理
转载
2024-04-24 11:41:35
490阅读
Tempo是Grafana Labs在ObservabilityCON 2020大会上新开源的一个用于做分布式式追踪的后端服务。它和Cortex、Loki一样，Tempo也是一个兼备高扩展和低成本效应的系统。之前小白有提到Grafana Labs的云原生Observability宇宙只剩下trace部分，那么今天就拿Loki的分布式追踪来体验下这Observability的最后一环吧。关于Temp
转载
2024-08-27 14:59:02
413阅读
Loki日志系统详解1——背景Loki日志系统详解1——背景最近，在对公司容器云的日志方案进行设计的时候，发现主流的ELK或者EFK比较重，再加上现阶段对于ES复杂的搜索功能很多都用不上最终选择了Grafana开源的Loki日志系统，下面介绍下Loki的背景。背景和动机当我们的容器云运行的应用或者某个节点出现问题了，解决思路应该如下： 我们的监控使用的是基于prometheus体系进行改造的，pr
转载
2024-06-25 15:50:58
122阅读
文章目录Vector 简介相关概念事件Data modelEvent typesLog eventsMetric eventsTraces组件构成源转换接收器PipelineBuffersBackpressureRolesAgentDaemonSidecarAggregatorTopology分布式集中式基于流 Vector 简介Vector 是一种高性能的可观察性数据管道，可让组织控制其可观察
总结下 loki 的优点低索引开销loki 和 es 最大的不同是 loki 只对标签进行索引而不对内容索引这样做可以大幅降低索引资源开销 (es 无论你查不查，巨大的索引开销必须时刻承担)并发查询 + 使用 cache同时为了弥补没有全文索引带来的查询降速使用，Loki 将把查询分解成较小的分片，可以理解为并发的 grep和 prometheus 采用相同的标签，对接 alertmanagerL
公司一直使用的Filebeat进行日志采集 由于Filebeat采集组件一些问题，现需要使用iLogtail进行代替 现记录下iLogtail介绍和实际使用过程 这是iLogtail系列的第七篇文章目录背景架构演进现有架构iLogtail中期架构最终架构背景目前iLogtail部署测试过程中已实现如下功能：1、同时采集不同目录的日志2、采集文件后支持
loki 日志系统elk，功能很多，资源也要求高，对于我们中小团队来说比较重，但是使用查看开发环境日志不太简易。loki 比较简单使用。具体更多介绍可以参考官方网站：https://github.com/grafana/lokiloki 日志系统组成loki是主服务器，负责存储日志和处理查询。promtail是代理，负责收集日志并将其发送给 loki 。Grafana用于 UI 展示。环境说明和前
转载
2023-11-03 18:35:52
901阅读
grafana loki小记Loki架构组件关系和说明DistributorIngesterQuery frontendQuerier单体部署查询单体配置多租户场景多环境场景配置静态配置，指定采集目录/文件grafana权限之允许viewer使用explore测试2.x集群架构 Loki架构 由上图可以看到，loki分为单体架构和微服务架构两种模式 单体模式（非生产环境可以用这个） 微服务模式（
转载
2024-04-28 12:31:12
161阅读
背景最近，在对公司容器云的日志方案进行设计的时候，发现主流的ELK或者EFK比较重，再加上现阶段对于ES复杂的搜索功能很多都用不上最终选择了Grafana开源的Loki日志系统，下面介绍下Loki的背景。背景和动机当我们的容器云运行的应用或者某个节点出现问题了，解决思路应该如下：我们的监控使用的是基于Prometheus体系进行改造的，Prometheus中比较重要的是Metric和Alert，M
转载
2024-10-19 11:46:43
73阅读
看关注的公众号发现推送了这篇文档，大概看了一下是发送邮件通知的，暂时用不到，保存一下，万一以后用到可以借鉴一下一、安装邮件服务1、加压tar -jxf mailx-12.4.tar.bz2 -C /usr/src/ && cd /usr/src/mailx-12.4/2、编译make install UCBINSTALL=/usr/bin/install 异常编译报错-1
