关于 Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等。
导语
各位小伙伴们,Pulsar 社区周报来啦!
本次 Pulsar 社区周报,为大家呈现 Pulsar transaction、broker、metrics、client 等方面内容,帮助社区小伙伴们掌握 Pulsar 项目及社区进展,也方便大家更好地参与到 Pulsar 社区中来!
感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜 ):
@gaoran10、@315157973、@zhanghaou、@hangc0276、@Technoboy-、@equanz、@srkukarni、@codelipenghui、@MarvinCai、@aloyszhang、@kellyfj、@zymap、@wolfstudy、@jerrypeng、@cimura、@tuteng、@jianyun8023、@Jennifer88huang、@RobertIndie、@BewareMyPower、@massakam、 @Bklyn
接下来,一起看看 08-22 ~ 09-04 有哪些值得你关注的进展吧!
重要特性
因为 PR 较多,仅列举较大 PR 进展,不包括本周全部动态
以下 PR 均已 Merge 进 Pulsar 主分支
Transaction: 处理事务中的消息确认。
PR 地址:
https://github.com/apache/pulsar/pull/7856
贡献者:
@gaoran10(https://github.com/gaoran10)
Transaction: 支持对分区事务的异常终止。
PR 地址:
https://github.com/apache/pulsar/pull/7953
贡献者:
@gaoran10(https://github.com/gaoran10)
Transaction: 优化消费事务型消息的逻辑。
PR 地址:
https://github.com/apache/pulsar/pull/7833
贡献者:
@gaoran10(https://github.com/gaoran10)
Topic Policy: 支持在 Topic 级别设置、获取和移除 inactiveTopicPolicies。
PR 地址:
https://github.com/apache/pulsar/pull/7986
贡献者:
@315157973(https://github.com/315157973)
Topic Policy: 支持在 Topic 级别设置卸载策略。
PR 地址:
https://github.com/apache/pulsar/pull/7883
贡献者:
@315157973(https://github.com/315157973)
Topic Policy: 支持在 Topic 级别设置、获取和移除 maxProducers。
PR 地址:
https://github.com/apache/pulsar/pull/7914
贡献者:
@zhanghaou(https://github.com/zhanghaou)
Topic Policy: 支持在 Topic 级别设置、获取和移除压缩阈值。
PR 地址:
https://github.com/apache/pulsar/pull/7881
贡献者:
@hangc0276(https://github.com/hangc0276)
Broker: Pulsar Functions 的消费者/生产者属性支持主机名。
PR 地址:
https://github.com/apache/pulsar/pull/7897
贡献者:
@jerrypeng(https://github.com/jerrypeng)
Broker: Pulsar primitive schema 支持 Java 8 日期和时间类型。
PR 地址:
https://github.com/apache/pulsar/pull/7874
贡献者:
@jianyun8023(https://github.com/jianyun8023)
Broker: BatchPushSource 支持异步通知错误。
PR 地址:
https://github.com/apache/pulsar/pull/7865/files
贡献者:
@jerrypeng(https://github.com/jerrypeng)
Broker: 支持在 Topic 级别上设置消息发送速率的流控。
PR 地址:
https://github.com/apache/pulsar/pull/7863
贡献者:
@hangc0276(https://github.com/hangc0276)
重要 Bug 修复
因修复内容较多,仅列举较重要修复内容,不包括本周全部动态
下面修复均已 Merge 进 Pulsar 主分支
Broker: 修复 broker 端确认消息时出现的 NPE(空指针异常)问题。
PR 地址:
https://github.com/apache/pulsar/pull/7937
贡献者:
@Technoboy-(https://github.com/Technoboy-)
Broker: 在 Key_Shared 订阅模式下,当消费者无法消费消息造成临时跳过消息时,暂停发布消息。
PR 地址:
https://github.com/apache/pulsar/pull/7553
贡献者:
@equanz(https://github.com/equanz)
Metrics: 修复提供错误信息的 Pulsar metrics。
PR 地址:
https://github.com/apache/pulsar/pull/7905
贡献者:
@315157973(https://github.com/315157973)
CPP Client: 确保 BatchAcknowledgementTracker 和 UnAckedMessageTrackerEnabled 的 clear() 方法线程安全。
PR 地址:
https://github.com/apache/pulsar/pull/7862
贡献者:
@BewareMyPower(https://github.com/BewareMyPower)
Broker: 通过 Ledger ID 划分消息范围,并将其存储在 individualDeletedMessages 中。
PR 地址:
https://github.com/apache/pulsar/pull/7861
贡献者:
@massakam(https://github.com/massakam)
Broker: 修复添加消费者时发生的死锁问题。
PR 地址:
https://github.com/apache/pulsar/pull/7841
贡献者:
@massakam(https://github.com/massakam)
CPP Client: 异常处理中,抛出 std::exception 类来代替 char*。
PR 地址:
https://github.com/apache/pulsar/pull/7798
贡献者:
@Bklyn(https://github.com/Bklyn)
活动和新闻
TGIP每周直播:Pulsar 及其生态系统
往期视频参考:
https://streamnative.io/resource#tgip
本周日 TGIP 会对近期社区小伙伴提出的问题进行解答,由 Apache Pulsar PMC 成员李鹏辉为大家线上答疑解惑。参与本周日的TGIP-CN 025: 《 答疑专场,有问题您就来》
StreamNative 在线研讨会 - "Managing Real-Time Data Teams"
主讲人:Jesse Anderson,Big Data Institute 大数据专家。
PPT 链接:
https://www.slideshare.net/JesseAnderson/managing-realtime-data-teams
研讨会回放链接:
https://www.youtube.com/watch?v=Owl_ncQbVwk
活动预告
➡️ Pulsar Summit Asia 2020 官网上线,正式开始演讲征集
大会官网链接:
https://pulsar-summit.org/zh/event/asia-2020
➡️ 9月9日:"Apache Pulsar: Under the Hood for Java Developers"
分享嘉宾:Addison Higham
报名链接:
http://meetup.com/JavaIL/events/272501454/
推荐阅读
➡️ Apache Pulsar 2.6.1 版本更新,详情阅读博客:
https://streamnative.io/blog/tech/2020-08-21-pulsar-261
➡️ Apache Pulsar 社区贡献者人数突破 300 位
https://streamnative.io/blog/tech/2020-08-24-pulsar-300-contributors
➡️ 《The role of Apache BookKeeper in Apache Pulsar - part 1》
作者:Bartosz Konieczny
文章链接:
https://www.waitingforcode.com/apache-pulsar/role-apache-bookkeeper-apache-pulsar-part-1/read
➡️ 《10 Reasons for Choosing Apache Pulsar over Apache Kafka》
作者:Maximilian Michels
作为全球性开源项目,截至 2020 年 9 月 4 日,Apache Pulsar 已拥有超出 300 名贡献者、6.5K+ Star 、1.6K+ Fork 。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。
让我们期待下一周的 Apache Pulsar 周报!
如果你也想为 Apache Pulsar 项目出一份力、成为我们的 contributor,参考下面链接,来加入我们吧:
-
官方贡献指南
http://pulsar.apache.org/en/contributing/