ELK日志分析平台
ELK(1)： ELK-简介
ELK(2)： ELK-安装环境和安装包
ELK(3)： ELK-安装elasticsearch
ELK(4)： ELK-安装logstash
ELK(5)： ELK-kibana安装、使用和代理访问
ELK(6)： ELK-logstash收集Nginx日志
ELK(7)： ELK-logstash收集tomcat(java
转载
2021-08-18 16:03:52
197阅读
我的博客已迁移到xdoujiang.com请去那边和我交流
ELKstack是Elasticsearch、Logstash、Kibana三个开源软件的组合。目前都在Elastic.co公司名下。
ELK是一套常用的开源日志监控和分析系统，包括一个分布式索引与搜索服务Elasticsearch，
一个管理日志和事件的工具logstash，和一个数据可视化服务Kibana
logstash_1.5.3
原创
2015-09-23 08:41:27
3592阅读
工作原理如下如所示：部署流程：1、安装logstash的JDK环境：# tar zvxf jdk-8u73-linux-x64.tar.gz
# mv jdk-8u73-linux-x64 /usr/local/java
# vim /etc/profile
export JAVA_HOME=/usr/loc
原创
2016-09-29 18:09:54
2506阅读
当服务器数量以及应用达到一定的数量后，操作系统日志以及应用软件日志数量庞大，遇到问题时日志是第一手资料。平时用的sed、grep、awk已经难以满足我们的需求。随着互联网技术的发展，好多大型互联网公司研发了不同的日志分析产品，例如开源的Graylog、ELK还有Splunk等，同时Splunk也是一个商业产品，功能很强大，但是在目前的互联网领域里ELK的使用应该是更广泛。接下来会根据
原创
2017-11-03 14:30:39
1347阅读
为什么要使用日志分析平台对于日志的重要性，都会很认同，不管是一个小网站，还是一个大系统，都会用到日志网站初期，一般就是查看web服务器访问日志，例如，平时关注一下404访问，有的话及时处理一下；网站访问变慢了，查看一下是哪些访问比较频繁、哪些资源占流量等等如果管理员很勤劳，这时可能都不需要什么工具，直接打开日志文件用肉眼就能看个差不多了随着网站规模的发展，访问日志越来越多，勤劳的管理员肉眼搞不定了
原创
2021-04-22 15:41:38
246阅读
ELK即Elasticsearch+Logstash+Kibana组合，是一个开源分布式搜索平台，搭建该平台的目的就是为了方便的查询日志。Elasticsearch一个开源的搜索引擎框架，Logstash集成各种收集日志插件，还是一个比较优秀的正则切割日志工具；Kibana一个免费的web图形工具。安装架构如图所示，安装环境为rhel6.4一、安装redis#yum -y insta
原创
2015-11-09 13:43:22
1179阅读
简要记录一些ELK搭建过程中需要的地址
原创
2018-11-14 14:09:04
781阅读
什么是日志数据？业界日志收集、结构化、分析工具方案很多，例如：Logstash、Filebeat、Flume、Fluentd、Chukwa. scribe、Splunk等，各有所长。在结构化日志这个方面，大多采用配置正则表达式模板：用于提取日志中模式比较固定、通用的部分，例如日志时间、日志类型、行号等。对于真正的和业务比较相关的信息，这边部分是最重要的，称为message部分，我们希望使用可视化的
环境： OS：Centos 6.6 elasticsearch-5.6.3.tar.gzjdk-8u151-linux-x64.tar.gzkibana-5.6.3-linux-x86_64.tar.gzlogstash-5.6.3.tar.gznode-v6.11.4-linux-x64.tar.xz一、准备环境：1、创建用户，并给安装目录设置权限[root@
原创
2017-10-26 00:00:21
7158阅读
面临的问题程序运行的日志是一个必不可少的东西，可能是一些系统信息，比如gc的情况
原创
2023-04-11 09:40:23
1245阅读
最近公司领导要求我搭建一个日志收集分析平台，用于给开发同事查看访问和业务日志，花了一段时间终于把日志平台搭建出来了
原创
2016-08-20 16:59:45
10000+阅读
构建ELK海量日志分析平台网盘地址：https://pan.baidu.com/s/1vIs26vGhAdXgQ2z7Uy8CLw提取码:geig备用地址（腾讯微云）：https://share.weiyun.com/5sIH2Hc密码：ckde5g一套完整的项目实战案例源码；3门系统完整实战课程；从0开始，构建ELK海量日志分析平台本课程重点构建ELK海量日志分析平台，包括Filebeat多数据
原创
2020-03-30 09:34:50
305阅读
ELK介绍需求背景业务发展越来越庞大，服务器越来越多各种访问日志、应用日志、错误日志量越来越多，导致运维人员无法很好的去管理日志开发人员排查问题，需要到服务器上查日志，不方便运营人员需要一些数据，需要我们运维到服务器上分析日志为什么要用到ELK？一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大也就是日志量多而复杂的场景中，此方法效率低下，面临
原创
2022-12-30 15:41:11
1004阅读
注释概念介绍：日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷，性能安全性，从而及时采取措施纠正错误。通常，日志被分散在储存不同的设备上。如果你管理...
原创
2023-01-03 11:56:23
119阅读
elk
原创
2018-04-18 16:06:58
2709阅读
点赞
根据第一篇日志以及整个团队的任务分工，这两天我主要完成轨迹规划算法及测试程序。目前解决的问题在团队项目仓库的drcs/include文件路径下，我们已经定义了一个TrajectoryPlanning类，它继承了已定义的RobotCommand类，而RobotCommand类继承了RobotSystem类。这部分工作主要是团队盛玉庭完成的，其他人慢慢优化。之前我个人一直使用Axis和Robot类，放
ELK介绍需求背景业务发展越来越庞大，服务器越来越多各种访问日志、应用日志、错误日志量越来越多，导致运维人员无法很好的去管理日志开发人员排查问题，需要到服务器上查日志，不方便运营人员需要一些数据，需要我们运维到服务器上分析日志为什么要用到ELK？一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大也就是日志量多而复杂的场景中，此方法效率低下，面临
原创
2022-12-30 15:40:52
817阅读
简介：Loki的第一个稳定版本于2019年11月19日发布，是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。Loki 是专门用于聚集日志数据，重点是高可用性和可伸缩性。与竞争对手不同的是，它确实易于安装且资源效率极高。特点：优点：1、Loki的架构非常简单，使用了和prometheus一样的标签来作为索引，通过这些标签既可以查询日志的内容也可以查
转载
2021-04-20 16:36:14
2259阅读
需求1.开发人员不能登录线上服务器查看日志2.各个系统都有日志，日志分散难以查找3.日志数据量大，查找慢，数据不够实时解决办法：部署ELK平台ELK介绍ELK是三个开源软件的缩写，分别表示：Elasticsearch,Logstash,Kibana,它们都是开源软件。新增了一个FileBeat，它是一个轻量级的日志收集处理工具(Agent)，Filebeat占用资源少，适合于在各个服务器上搜集日志
原创
2020-02-17 20:54:49
6405阅读
点赞
1评论
ELK(Elasticsearch + Logstash + Kibana) 日志分析平台 A+ 所属分类：大数据 Elasticsearch + Logstash + Kibana（ELK）是一套开源的日志管理方案，分析网站的访问情况时我们一般会借助Google/百度/CNZZ等方式嵌入JS做数据 ...
转载
2021-10-28 09:22:00
1569阅读
2评论
