ELK（Elasticsearch, Logstash, Kibana）是一套用于日志管理和分析的开源解决方案。它由以下三个核心组件组成：Elasticsearch：Elasticsearch是一个分布式、实时的搜索和分析引擎。它使用倒排索引来快速存储、搜索和分析大量的数据。Elasticsearch提供了强大的全文搜索、复杂查询、聚合和地理空间搜索等功能。Logstash：Logstash是一个
转载
2024-05-17 12:46:42
72阅读
文章目录前言一、概念/使用环境二、组件详解2.1 elasticsearch2.2 kibana2.3 logstash2.4 filebeat2.5 ELFK的好处2.6 fluentd（额外）三、集群搭建3.1 elasticsearch3.2 Apache/Logstash/kibana四、思维导图五、结语 前言本博客内容仅为记录博主思路，仅供参考，一切以自己实践结果为准。一、概念/使用环
转载
2024-04-18 19:15:34
92阅读
springboot继承efk实现日志收集1.安装es和kibana我使用的云服务器centos7,2核+4G内存,跑起来内存使用率50%左右建议使用最低配置和我一样,1+2的配置kibana应该跑不起来,安装过程使用了尚硅谷的springcloud的课程资料,也**!!!可以不用,自己pull**,我附了pull的方法资料包:链接：https://pan.baidu.com/s/1GW1qUUw
转载
2024-04-03 11:05:57
63阅读
elk日志分析系统，在生产环境中一般搭建集群，来满足大数据量的查询分析下面就说说集群的搭建：集群的搭建主要还是配置文件的修改：主要配置文件修改项：cluster.name: baichebao-cluster这个是配置集群的名字，为了能进行自动查找node.name: "baichebao-node-1"这个是配置当前节点的名字，当然每个节点的名字都应该是唯一的node.master: false
转载
2024-05-07 21:25:15
34阅读
这段时间学习了一下Elasticsearch，先记录一下搭建elasticsearch集群。首先是集群的结构图： 主分片和副本分片不能同时存在于同一台服务器，比如主1和副1不能同时存在于同一台服务器，不然宕机之后这里的数据都没有了。搭建我这里准备了3台elasticsearch服务器 里面的系统环境我都已经搭建完毕了，用的都是elasticsearch7.6.2。 安装包到ES的官网下载就可以了，
转载
2024-08-15 07:50:51
135阅读
kafka使用zookeeper来管理Brokers（kafka服务进程）、执行partition（分区）的leader选举、当出现变更时向kafka发送通知（新建topic、删除topic、broker上线、broker下线）。zookeeper通常配置为集群，一般3个或者5个，其中一个为leader，
转载
2024-03-26 09:46:41
93阅读
左手Goby右手FOFA，祝（助）你开局弱口令，处处出0day！文章末找此版本获取方式↓0x001 新增漏洞新增漏洞22条实战漏洞：包含Yonyou NC RCE、SaltStack RCE (CVE-2020-16846) 、Citrix XenMobile Arbitrary file read (CVE-2020-8209)(2020-11-16)、Apache Unomi RCE (CVE
Redis集群搭建要想搭建一个最简单的Redis集群，那么至少需要6个节点：3个Master和3个Slave。为什么需要3个Master呢？如果你了解过Hadoop/Storm/Zookeeper这些的话，你就会明白一般分布式要求基数个节点，这样便于选举（少数服从多数的原则）。
Redis集群模型
这里，我将采用一种“偷懒”的方式，在一个Linux虚拟机上搭建
转载
2023-08-21 10:19:39
5阅读
# Redis Cluster 最少需要几台机器？
作为一名经验丰富的开发者，我经常被问到关于Redis Cluster的问题，尤其是“Redis Cluster最少需要几台机器”。这个问题的答案可能对初学者来说有点复杂，但不用担心，我会详细解释整个过程。
## 1. Redis Cluster 简介
Redis Cluster 是 Redis 的一个分布式版本，它通过分区（sharding
原创
2024-07-27 10:34:20
139阅读
1.HA架构注意事项 两个Namenode节点在某个时间只能有一个节点正常响应客户端请求，响应请求的节点状态必须是activestandby状态要能够快速无缝切换成active状态，两个NN节点必须时刻保持元数据一致将edits文件放到qjournal(一种分布式应用，依赖zookeeper实现，管理edits)，而不存储在两个NN上，如果各个edits放在各个NN上，只能通过网络通信达
转载
2024-07-26 12:46:37
54阅读
文章目录ELK 日志监控平台（一）- 快速搭建1.ELK 简介2.Elasticsearch安装部署3.Logstash安装部署4.Kibana安装部署5.日志收集DEMO5.1.创建SpringBoot应用依赖导入日志配置文件 logback.xml启动类目录结构启动项目5.2.创建Logstash配置文件5.3.重新启动Logstash5.4.Kibana配置Index5.5.Kibana查
# OpenStack控制：最小节点需求及其实现
在云计算的世界里，OpenStack作为一个开源的云计算管理平台，已经被广泛应用于构建和管理公共和私有云。为了确保其高可用性和可扩展性，OpenStack部署时需要一些基本的配置条件，其中“最小节点需求”是一个重要的概念。本文将探讨OpenStack系统所需的最小节点数，并通过示例代码和图表来阐释相关概念。
## 最小节点数的定义
在Open
原创
2024-10-11 08:00:55
96阅读
MySQL最流行的关系型数据库管理系统MySQL是WEB应用方面最好的RDBMS应用软件之一RDBMS：Relational Database Management System关系数据库管理系统 关系型数据库的主要产品：oracle：在以前的大型项目中使用,银行,电信等项目mysql：web时代使用最广泛的关系型数据库ms sql server：在微软的项目中使用sqlite：轻量级数
转载
2024-10-30 20:15:05
51阅读
Hadoop是一个分布式计算框架，用于处理大规模数据集的计算任务。它的设计目标是能够在由成千上万台普通计算机组成的集群上高效地存储和处理数据。那么，Hadoop集群中究竟需要多少台计算机才能运行起来呢？本文将通过代码示例和详细解释来科普Hadoop集群的最低配置要求。
在Hadoop集群中，有两个关键的角色：NameNode和DataNode。NameNode是集群的中央节点，负责管理整个文件系
原创
2024-02-02 07:29:20
237阅读
文章目录ZooKeeper内部原理1. 选举机制（面试重点）☆☆2. 节点类型3. Stat结构体4. 监听器原理（面试重点）☆5. 写数据流程☆ ZooKeeper内部原理ZooKeeper的部署方式有哪几种？集群中的角色有哪些？集群最少需要几台机器？部署方式单机模式、集群模式角色：Leader和Follower集群最少需要机器数：31. 选举机制（面试重点）☆☆半数机制：集群中半数以上机器存
转载
2024-03-21 09:17:04
114阅读
Ceph是一种开源的分布式存储系统，可以用来存储大量的数据。它的一个主要特点是可以容忍硬件故障，即使有几台服务器出现问题，数据仍然可以正常访问。这种容错性使得Ceph成为很多大型互联网公司和企业的首选存储解决方案。
Ceph是如何做到容忍几台故障的呢？它的核心原理是数据的复制和分布。当数据被写入Ceph存储集群时，它会被分成多个副本，并分布到集群中的不同节点上。这样即使某一个节点或者硬盘发生故障
原创
2024-03-01 09:53:05
176阅读
# 企业 MySQL 安装指南
在如今信息化快速发展的背景下，数据库是每个企业的核心部分。MySQL 是一种流行的关系型数据库管理系统，它以其开源、免费、易用等特点赢得了无数企业的青睐。本文将为大家介绍企业 MySQL 的安装流程，特别是如何在多台服务器上安装 MySQL，以确保数据的高可用性和负载均衡。
## 准备工作
在安装 MySQL 之前，有几项准备工作需要我们提前完成：
1. *
# Redis哨兵最少几台
在Redis中，哨兵(sentinel)是一种用于监控和自动管理Redis主从复制和高可用性的系统。它可以检测主节点的故障，并选择一个从节点升级为新的主节点，以确保系统的持续运行。那么，到底Redis哨兵最少需要几台呢？
## Redis哨兵的基本概念
在深入探讨Redis哨兵最少需要几台之前，我们先来了解一下Redis哨兵的基本概念。
- 主节点：负责接收写操
原创
2023-11-05 04:51:19
96阅读
# MongoDB分片需要几台？
MongoDB是一种流行的NoSQL数据库，广泛应用于高并发、大数据量的场景中。为了应对数据的快速增长，MongoDB提供了分片（Sharding）功能，将数据分散到多个服务器上，以实现更高的性能和可扩展性。那么，MongoDB分片需要多少台服务器呢？本文将探讨分片的架构要求，并提供代码示例，帮助你更好地理解这一概念。
## 什么是MongoDB分片？
在M
原创
2024-08-27 04:53:28
72阅读
3-Spring cloud之搭建Ribbon负载均衡——服务器上实操（上）1. 前言2. ribbon整合eureka入门2.1 修改相关配置2.1.1 修改服务消费者pom，引入ribbon相关依赖2.1.2 修改服务消费者yml，将客户端注册进eureka服务列表内2.1.3 修改配置类，开启客户端的负载均衡2.1.4 修改主启动类，开启客户端向注册中心eureka注册服务2.1.5 修改
