1.
原创 2023-08-03 17:46:34
115阅读
# Docker 安装 Kafka 2.11 在这篇文章中,我将向您介绍如何使用 Docker 安装和配置 Kafka 2.11Kafka 是一个高性能的分布式消息队列系统,适用于大规模的数据处理和实时流处理应用。 ## 准备工作 在开始之前,您需要确保已经安装了 Docker,并且可以通过命令行访问。您还需要一个 Kafka 的 Docker 镜像,可以从 Docker Hub 上获取。
原创 2023-08-03 17:04:59
201阅读
​ 安装 配置server.properties 搭建kafka集群时,此处的​​broker.id​​的值要保证唯一: 将暂存数据的目录进行调整:​​/opt/kafka/kafka_2.11-0.11.0.0/logs​​ 配置zk: 默认​​localhost​​ 配置环境变量 启动kafka单节点守护进程启动:
原创 2022-01-19 15:12:58
217阅读
1 软件版本要求和宿主环境1.1 软件版本jdk1.7zookeeper 2.4.6 (kafka内置) & kafka_2.11-0.10.0.0logkafka-masterkafka-manager-1.2.9.10KafkaOffsetMonitor软件地址kafkahttp://kafka.apache.org/downloadslogkafka-masterhttps://gi
原创 2017-10-16 11:57:04
2462阅读
1点赞
localhost配置环境变量启动kafka单节点守护进程启动:...
原创 2021-07-06 09:55:10
890阅读
""" Counts words in UTF8 encoded, '\n' delimited text received from the network every second. Usage: kafka_wordcount.py <zk> <topic> To run this on your local machine, you need to setup
原创 2023-08-03 22:02:31
93阅读
Kafka-2.11学习笔记(三)JavaApi访问kafka
原创 2015-11-19 23:04:11
10000+阅读
1点赞
1评论
broker.idlistenerslog.dirslog.retention.hourszookeeper.connect启动kafka查看数据存储目录关闭kafka创建topic测试
原创 2021-07-06 09:54:29
1844阅读
broker.idlistenerslog.dirslog.retention.hourszookeeper.connect启动kafka查看数据存储目录关闭kafka创建topic测试
原创 2022-01-19 15:01:15
219阅读
Kafka-2.11-0.8.1学习笔记汇总
原创 2015-11-22 21:39:34
882阅读
  一.要使用kafka首先要配置启动好zookeeper1.在zookeeper的conf目录里 执行:cp zoo_sample.cfg   zoo.cfg2.打开zoo.cfg的文件命  令 :vi zoo.cfg   dataDir=/tmp/zookeeper  (虽然给出这个路径给你,但是系统并没有,要你自
转载 2023-10-14 17:11:56
122阅读
本文搭建一个三节点的Kafka集群。该集群有三个Zookeeper、三个Kafka Broker。一、准备工
原创 2021-08-13 10:04:09
343阅读
Kafka-2.11学习笔记(一)简单介绍
原创 2015-08-05 21:19:54
10000+阅读
Kafka-2.11学习笔记(二)Shell脚本介绍
原创 2015-11-13 15:58:48
10000+阅读
Spark2.x 自从引入了 Structured Streaming 后,未来数据操作将逐步转化到 DataFrame/DataSet,以下将介绍 Spark2.x 如何与 Kafka0.10+整合Structured Streaming + Kafka引包groupId = org.apache.spark artifactId&nb
转载 2017-06-30 11:46:00
2996阅读
kafka-2.11-2.00 生产消费创建主题1、使用kafka创建主题,获取所有主题/** * @author 薛向毅 * @create 2018-09-21 14:23 **/public class CreateTopic { public static void main(String[] args) throws ExecutionException, Inte...
原创 2021-08-18 14:06:29
206阅读
目录CAP理论概述ConsistencyAvailabilityPartition Tolerance CAP理论概述1988年,加州大学计算机科学家Eric Brewer 提出了分布式系统的三大指标:Consistency、Availability、Partition Tolerance,他指出这三个条件同时最多只能满足两个,目前所有的分布式系统都遵循CAP定律,比如Hadoop、HBASE、
转载 2024-06-19 11:59:46
801阅读
Kafka提供了以下4类核心APIProducer API :提供生产消息相关接口,我们通过实现该API提供的接口来自定义Producer、自定义分区策略等Consumer API :Consumer API提供消费信息相关接口,包括创建消费者、消费偏移量管理端等。Stream API:Streams APIKafka提供的一系列用来构建流处理程序的接口,通过Streams API让流处理相关的
转载 2024-02-24 11:49:11
176阅读
package com.shujia.kafka import java.util.Properties import org.apache.kafka.clients.producer.{KafkaProducer, ProducerRecord} object Demo1KafkaProduce ...
转载 2021-07-24 22:32:00
216阅读
2评论
一、概念1.什么是KafkaKafka是一种高吞吐量的分布发布-订阅消息系统,专为超高吞
原创 2022-11-02 14:52:31
114阅读
  • 1
  • 2
  • 3
  • 4
  • 5