参考资料
Kafka 中文文档 Kafka的安装和简单实例测试 kafka-python 1 安装Kafka 中文文档中主要介绍了 Linux/Windows 系统下的 Kafka 配置，为了在本地 Mac 系统下跑起一个 demo，本文简单介绍如何在 Mac 中跑起 Kafka。执行 brew install kafka，由于 Kafka 需要依赖 ZooK
转载
2024-03-27 10:00:32
137阅读
Kafka概述1、什么是Kafka 在流式计算中，Kafka一般用来缓存数据，Storm通过消费Kafka的数据进行计算。 1）Apache Kafka是一个开源消息系统，由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2）Kafka最初是由LinkedIn公司开发，并于2011年初开源。2012年10月从Apache Incubator毕业。该项目的目标是为处理实时数据
1、Kafka 都有哪些特点？高吞吐量、低延迟：kafka每秒可以处理几十万条消息，它的延迟最低只有几毫秒，每个topic可以分多个partition, consumer group 对partition进行consume操作。可扩展性：kafka集群支持热扩展持久性、可靠性：消息被持久化到本地磁盘，并且支持数据备份防止数据丢失容错性：允许集群中节点失败(若副本数量为n,则允许n-1个节点失败)高
转载
2024-08-06 18:47:13
33阅读
这两天重点学习了下kafka消息队列，对其相关比较重要的问题进行总结。（以下内容均个人理解总结，不对的地方多多指正）1.kafka组成有哪些？Broker：kafka保存消息的中转站，集群中包含多个kafka服务节点，每个kafka服务节点就称为broker。Topic：主题，用来存储不同类别的消息。Partition：分区队列，一个Topic包个或多个Partition，在创建Topic时指定包
转载
2024-04-03 12:49:12
78阅读
# MySQL有几个进程
## 导语
MySQL是一种常见的关系型数据库管理系统，它使用一个或多个进程来处理数据库的各种操作。对于刚接触MySQL的人来说，可能会对MySQL的进程数量感到困惑。在本文中，我们将讨论MySQL的进程模型，并通过代码示例加深理解。
## 什么是进程？
在计算机科学中，进程是程序执行的实例。它是一个动态的实体，具有代码、数据和执行上下文。一个进程通常有自己的内存
原创
2023-08-21 06:11:10
230阅读
# 如何在 Java 中查看进程数量
在 Java 中，可能会遇到需要监控和管理进程的任务。例如，我们想知道 Java 程序有多少个进程在运行。下面我们将逐步指导你如何实现这个任务，并使用 Java 代码来完成。
## 流程概述
下面是查看 Java 进程数量的基本步骤：
| 步骤 | 描述 |
|------|-----------
文章目录1、HDFS的三个进程1.1 NameNode(NN，名称节点)1.2 DataNode(DN，数据节点)1.3 SecondaryNameNode(SNN，第二名称节点)2、HDFS架构 1、HDFS的三个进程1.1 NameNode(NN，名称节点)存储元数据，内容如下： a.文件名称 b.文件目录结构 c.文件属性(权限，创建时间，副本数) d.文件–>哪些数据块–>分
转载
2024-04-20 18:36:10
47阅读
# 如何使用Docker查看进程数量
## 概述
本文将指导你如何使用Docker命令来查看运行中的容器中的进程数量。了解如何查看Docker容器中的进程数量对于监控和调试容器非常有用。
## 步骤概览
下表展示了查看Docker容器中进程数量的步骤。每一步后面我将详细解释需要执行的命令和代码。
| 步骤 | 描述 |
| --- | --- |
| 步骤1 | 获取容器的ID或名称 |
原创
2023-07-17 20:41:38
846阅读
HDFS(分布式文件存储系统)--概述目录HDFS(分布式文件存储系统)--概述一、概述二、特点优点：缺点：一、概述全称为Hadoop Distributed File System ，Hadoop分布式文件存储系统HDFS是根据谷歌的论文：《The Google File System》进行设计的本身是一个分布式的，可扩展，可靠的文件系统HDFS中包含三个主要的进程：NameNode，DataN
转载
2024-03-01 13:44:37
56阅读
Hadoop系统在正常启动后有五个重要的JVM进程，分别是NameNode，SecondaryNameNode，DataNode，JobTracker，TaskTracker。这五个进程肩负着HDFS在存储和计算上的各项任务。 NameNode进程 NameNode只有一个，它是整个HDFS的核心。分布式文件系统的管理者。当然也是HDFS的一个单点瓶颈，如果它挂掉，HD
转载
2023-07-20 16:06:19
1110阅读
HDFS 的原理1、HDFS 总结2、HDFS 的读写流程2.1、写流程2.2、读流程3、NameNode 工作机制4、DataNode 工作机制5、SecondaryNamenode 工作机制6、学习内容 1、HDFS 总结1、HDFS 集群分为两大主要角色：namenode、datanode (secondarynamenode 和 client) 。 2、namenode 负责管理整个文件
转载
2024-03-06 12:15:04
183阅读
Kafka 单机部署演示前置准备虚拟机配置：内存：3G处理器：1核数：1（一）kafka 安装去kafka官网下载稳定版本到Linux服务器中进行解压安装。下载链接，我这里使用的是2.7.0 版本的, 建议使用迅雷插件下载，wget 速度有点慢。[root@localhost install-package]# pwd
/home/lvzb/install-package
[root@localh
转载
2023-12-02 15:54:15
56阅读
前面说过Kafka集群环境的部署，现在主要说一下在本地测试中Kafka单机环境的部署，和前面一样首先保证zookeeper服务的正常运行，然后解压并释放kafka安装包，并放到指定位置： tar -xvzf kafka_2.9.2-0.8.2.2.tar.gz
mkdir /usr/kafka
mv kafka_2.9.2-0.8.2.2 /usr/kafka/
cd /usr/kafka/
转载
2024-03-21 09:08:44
40阅读
当发现性能比较慢，然后又按照 Kafka性能优化指南进行调优，对linger.ms,batch.size等参数进行调优，但发现毫无用处，这是为啥呢？Kafka的高吞吐率设计的核心要点之一是批处理，即kafka在消息发送端引入了一个双端队列，应用程序通过KafkaProducer的send方法时，会将消息先放入到双端队列，然后kafka使用一个异步线程从队列中成批发送消息。为了确保sender线程能
转载
2024-08-06 20:29:28
23阅读
目录安装调试基本语法Java输入数据flume传输文件到kafka补充 安装调试1、安装包下载：https://pan.baidu.com/s/1il4pKzJHIOU3wG1BBotmlw 提取码：cd7b 2、解压到虚拟机中指定位置tar -zxvf kafka_2.11-2.0.0.tgz -C /opt/3、根据自己需要修改下文件名mv kafka_2.11-2.0.0/ kafka4
转载
2024-04-10 11:53:32
89阅读
OSPF（Open Shortest Path First）是指开放式最短路径优先协议，是一种用来为 IP 网络选择最佳路由的动态路由协议。 在OSPF中，每个路由器都运行一个OSPF进程来管理路由表和转发数据包。在网络中有多个OSPF进程运行的时候，每个进程被赋予一个唯一的进程号来区分不同的进程。
对于OSPF进程号的疑问，很多人都会问：“OSPF进程号有几个？”其实，每个OSPF进程只有一个
原创
2024-02-22 10:21:18
50阅读
# 如何实现iOS app有几个进程
## 一、流程图
```mermaid
flowchart TD
A(开始) --> B(获取当前app的进程数)
B --> C(显示进程数)
C --> D(结束)
```
## 二、步骤表格
| 步骤 | 描述 |
| --- | --- |
| 1 | 获取当前app的进程数 |
| 2 | 显示进程数 |
## 三、
原创
2024-06-26 03:35:49
98阅读
下面介绍的是Nginx有关知识点。一、Nginx基础1、Nginx功能（三个） 静态的web服务器 ---------------http/https 反向代理服务器 -----------http/smtp/pop3/imap4（主要作用） 负载均衡集群 Nginx的反代： 基于FastCGI、uwsgi、SCGI等协议反代动态资源请求
在华为设备上，ABR（Area Border Router）是指位于两个不同OSPF区域之间的路由器，它在不同区域之间传递路由信息。在配置ABR的过程中，有多个OSPF进程，ABR有几个OSPF进程成为了一个比较常见的问题。
在华为设备上，通常一个ABR只有一个OSPF进程。OSPF（Open Shortest Path First）是一种用于路由选择的链路状态路由协议，它利用链路状态数据库和D
原创
2024-03-01 10:16:19
60阅读
# Android AIDL多进程实现方法
## 简介
在Android开发中，AIDL（Android Interface Definition Language）是一种用于实现客户端与服务端进行进程间通信的重要技术。本文将向你介绍如何实现Android AIDL多进程的方法。
## 整体流程
以下是实现Android AIDL多进程的整体流程：
```mermaid
journey
原创
2024-07-02 06:48:15
19阅读
