1 背景最近由于项目需要，需要使用kafka的producer。但是对于c++，kafka官方并没有很好的支持。在kafka官网上可以找到0.8.x的客户端。可以使用的客户端有C版本客户端，此客户端虽然目前看来还较为活跃，但是代码问题还是较多的，而且对于c++的支持并不是很好。还有c++版本，虽然该客户端是按照c++的思路设计，但是最近更新时间为2013年12月19日，已经很久没有更新
org.apache.kafka.clients.consumer.KafkaConsumer#pollOnce 结论就是：consumer 拉取到消息后，会更新保存的位点信息，下
原创
2022-11-15 15:10:41
85阅读
本文只跟踪消费者拉取消息的流程。对于 java 客户端， kafka 的生产者和消费者复用同一个网络 io 类 NetworkClient。 入口在 KafkaConsumer#pollOnce 中，抽出主要步骤： Fetcher#sendFetches ConsumerNetworkClient#
原创
2022-11-15 15:10:57
258阅读
Step 15. Looper.pollOnce
这个函数定义在frameworks/base/libs/utils/Looper.cpp文件中，具体可以参考前面Android应用程序消息处理机制（Looper、Handler）分析一文，这里就不再详述了
原创
2011-10-24 00:59:02
937阅读
kafka consumer是一个单纯的单线程程序，因此相对于producer会更好理解些。阅读consumer代码的关键是理解回调，因为consumer中使用了大量的回调函数。参看kafka中的回调函数1 整体流程从KafkaConsumer#pollOnce(..)入口来看consumer的整体流程private Map<TopicPartition, List<ConsumerR
Kafka Consumer API是客户端的接口，封装了消息的接收，心跳的检测，consumer的rebalance等，此分析的代码基于kafka-clients-0.10.0.1 java版本KafkaConsumer.pollOnce 是轮询的入口，完成一次轮询动作，包括consumer相关的所有逻辑，其逻辑过程如下： 进一步，将相关的过程展开，如下图所示：
在消费者调用poll拉消息的时候，消费者会先检测当前是否需要执行分区再分配操作，如果需要则直接返回空的结果，这样在不超时的情况下，方法 KafkaConsumer#pollOnce 会立即被再次调用，从而开始对当前 topic 分区执行再分配，即调用 ConsumerCoordinator#poll 方法。public boolean pol
转载
2024-04-17 19:42:23
58阅读
Kafka Consumer API是客户端的接口，封装了消息的接收，心跳的检测，consumer的rebalance等，此分析的代码基于kafka-clients-0.10.0.1 java版本KafkaConsumer.pollOnce 是轮询的入口，完成一次轮询动作，包括consumer相关的所有逻辑，其逻辑过程如下： 进一步，将相关的过程展开，如下图所示：
转载
2024-04-25 14:55:21
38阅读
在Android的消息机制中。不仅提供了供Application 开发使用的java的消息循环。事实上java的机制终于还是靠native来实现的。在native不仅提供一套消息传递和处理的机制，还提供了自己定义文件描写叙述符的I/O时间的监听机制。以下我们从详细代码中分析一下。
Native层的关键类：
Looper.cpp.该类中提供了pollOnce 和wake的休眠和唤醒机制。
同一时
转载
2017-08-03 18:19:00
345阅读
2评论
Looper中的睡眠等待与唤醒机制
C++类Looper中的睡眠和唤醒机制是通过pollOnce和wake函数提供的，它们又是利用操作系统（Linux内核）的epoll机制来完成的。当被监控的文件（通过epoll_ctl的EPOLL_CTL_ADD添加进去）可I/O时，epoll_wait调用会从睡眠中醒来，这时，可以检查是哪个（或哪些）文件描述符对应的文件可以进行I/O读写了，从而做出进一步处
原创
2013-01-29 13:31:14
394阅读
