1. 错误描述kafka Producer在运行期间，出现大量以下错误：# 第一种
org.apache.kafka.common.errors.NotLeaderForPartitionException: This server is not the leader for that topic-partition.和# 第二种
org.apache.kafka.common.errors.Ti
转载
2024-03-19 19:53:58
529阅读
kafka外网访问配置：1 启动advertised.listeners配置异常:java.lang.Ill
转载
2021-07-13 09:39:31
453阅读
kafka外网访问配置：1 启动advertised.listeners配置异常:java.lang.IllegalArgumentException: requirement failed: advertised.listeners cannot use the nonroutable meta-address 0.0.0.0. Use a routable IP address. at
转载
2022-04-02 13:40:52
793阅读
kafka外网访问配置： 1 启动advertised.listeners配置异常: java.lang.Illroutable meta-address 0.0....
原创
2023-05-08 10:37:01
152阅读
org.apache.kafka.clients.consumer.CommitFailedException: Commit cannot be completed since the group has already rebalanced and assigned the partitions to another member. This means that the ti
转载
2024-03-22 08:53:26
130阅读
一、整体看一下Kafka
我们知道，Kafka系统有三大组件：Producer、Consumer、broker 。
二、开发一个Producer应用
Producers用来生产消息并把产生的消息推送到Kafka的Broker。Producers可以是各种应用，比如
转载
2024-09-18 10:48:24
56阅读
在第一次搭建kafka集群遇到了很多的错误，在网上搜索了很多，在这里，我把我搭建kafka环境遇到的问题汇总一下。1. kafka启动后秒退。2.升级jdk为jdk-8u181后，再次启动kafka，依然闪退。3.修改好之后重新启动kafka，发现其中有一台节点的kafka没有闪退，其他两台会存在1分钟之后依然退出。修改好之后，再次启动，一切正常，kafka也不会闪退了 1. kafka启动后秒
转载
2024-03-19 13:22:48
105阅读
The leader epoch in the request is older than the epoch on the broker--Partition $topicPartition marked as failed说明
原创
2022-10-06 22:56:28
4508阅读
前段时间leader让我选择一个东西深入研究下，我选择了Kafka，学习中以书籍为主，也在网上找了很多参考文献，其实Kafka主要就是网络通行和数据存储，更像是一个数据库，客户端的行为就是提交数据和获取数据，经过了一个月的陆陆续续的学历和文档整理，这次做一次整合怪，把总体的学习分享出来。下一步准备抽时间研究kafka源码。内容非常滴多，有兴趣的同学可以收藏起来慢慢看。一 kafka摘要Kafka摘
转载
2024-05-22 09:36:07
194阅读
MQ的工作模式: 一对一(点对点): 一个生产者对应一个消费者，生产者写入数据，消费者消费数据后，数据将在MQ中被删除。 一对多(发布订阅): 一个生产者可以对应多个消费者
转载
2024-04-19 09:57:40
69阅读
Java的异常类、常用类 文章目录Java的异常类、常用类一、异常1、异常简介2、异常（Exception）与错误（Error）的区别3、常用的异常类 常见的运行时异常： 常见的非运行时异常：4、异常处理机制 try-catch throws 和 throwthrows 声明异常throw 抛出异常5、自定义异常类二、常用类1、String类构造方法常见成员方法2、StringTokenizer类
转载
2023-09-19 09:23:02
72阅读
Kafka保证exactly once原理1 从producer角度考虑幂等性Kafka producer新增了幂等性的传递选项，该选项保证重传不会在 log 中产生重复条目。 为实现这个目的, broker 给每个 producer 都分配了一个 ID ，并且 producer 给每条被发送的消息分配了一个序列号来避免产生重复的消息。 同样也是从 0.11.0.0 版本开始, producer
转载
2024-04-03 12:32:00
10阅读
问题查看error.log报错日志如下：!在这里插入图片描述(https://s4.51cto.com/images/blog/202112/14155102_61b84ce6cb38f51227.png?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shado
原创
2021-12-14 15:51:21
1389阅读
Kafka在0.11.0.0之前的版本中只支持At Least Once和At Most Once语义，尚不支持Exactly Once语义。但是在很多要求严格的场景下，如使用Kafka处理交易数据，Exactly Once语义是必须的。我们可以通过让下游系统具有幂等性来配合Kafka的At Least Once语义来间接实现Exactly Once。但是：该方案要求下游系统支持幂等操作，限制了K
转载
2024-04-12 08:56:29
104阅读
1. 概述所谓的消息交付可靠性保障，是指 Kafka 对 Producer 和 Consumer 要处理的消息提供什么样的承诺。常见的承诺有以下三种：最多一次（at most once）：消息可能会丢失，但绝不会被重复发送。至少一次（at least once）：消息不会丢失，但有可能被重复发送。精确一次（exactly once）：消息不会丢失，也不会被重复发送。目前，Kafka 默认提供的交付
转载
2024-04-10 14:10:17
50阅读
# Java Kafka用例详解
Kafka是一个高性能、低延迟的分布式消息系统，它被广泛应用于实现各种实时数据管道和大数据处理场景。本文将介绍如何在Java中使用Kafka，并结合代码示例来说明Kafka的用法。
## Kafka的基本概念
在开始介绍Java Kafka用例之前，我们先来了解一下Kafka的基本概念。
### Topic
Topic是Kafka中消息的逻辑分类，每个消
原创
2024-06-26 03:10:18
25阅读
AttributeError:试图访问一个对象没有的属性，比如foo.x，但是foo没有属性xIOError:输入/输出异常；基本上就是无法打开文件ImputError:无法引入模块或包；基本上是路径问题或者名称错误IndentationError:语法错误（的子类），代码没有正确对齐（同一个代码快中）IndexError:下标索引超出序列边界，比如当x只有三个元素，却试图访问x[5]KeyErr
转载
精选
2016-02-28 20:51:14
586阅读
正确使用异常在实际编码中非常重要，但面试中的意义相对较小，因为对异常的理解和应用很难通过几句话或几行代码考查出来，不过我们至少应答出三点：异常类的继承关系、常用异常类、常用异常类的使用场景
转载
2018-01-15 19:54:06
506阅读
kafka重启系统 问题解决 由于kafka的一些元数据信息保存到zk中,zk的一些缓存数据写入磁盘,导致系统重启后zk读取的是一些旧的数据。 状态位unknow的broker节点成功注册到集群中
原创
2023-08-18 11:35:03
168阅读
之前架设了一个Kafka集群，跑了很久没有什么错误，最近开发的小伙伴跟我说部分kafka不能消费了，了解详细情况后，自己也赶紧作了个测试，发现是有报错
...
Caused by: rg.apache.kafka.common.errors.CoordinatorNotAvailableException: The coordinator is not available.
...
报错在网上搜
原创
2023-11-20 22:38:03
1458阅读
