Pulsar 社区周报|2020-08-22~ 2020-09-04_html

关于 Apache Pulsar

Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等。

导语

各位小伙伴们,Pulsar 社区周报来啦!

本次 Pulsar 社区周报,为大家呈现 Pulsar transaction、broker、metrics、client 等方面内容,帮助社区小伙伴们掌握 Pulsar 项目及社区进展,也方便大家更好地参与到 Pulsar 社区中来!

感谢本周以下小伙伴为 Apache Pulsar 添砖加瓦(排名不分先后,看看你有没有上榜 ):

@gaoran10、@315157973、@zhanghaou、@hangc0276、@Technoboy-、@equanz、@srkukarni、@codelipenghui、@MarvinCai、@aloyszhang、@kellyfj、@zymap、@wolfstudy、@jerrypeng、@cimura、@tuteng、@jianyun8023、@Jennifer88huang、@RobertIndie、@BewareMyPower、@massakam、 @Bklyn

接下来,一起看看 08-22 ~ 09-04 有哪些值得你关注的进展吧!

重要特性

因为 PR 较多,仅列举较大 PR 进展,不包括本周全部动态
以下 PR 均已 Merge 进 Pulsar 主分支

 Transaction: 处理事务中的消息确认。

PR 地址:

https://github.com/apache/pulsar/pull/7856

贡献者:

@gaoran10(https://github.com/gaoran10)

 Transaction: 支持对分区事务的异常终止。

PR 地址:

https://github.com/apache/pulsar/pull/7953

贡献者:

@gaoran10(https://github.com/gaoran10)

 Transaction: 优化消费事务型消息的逻辑。

PR 地址:

https://github.com/apache/pulsar/pull/7833

贡献者:

@gaoran10(https://github.com/gaoran10)

Topic Policy: 支持在 Topic 级别设置、获取和移除 inactiveTopicPolicies。

PR 地址:

https://github.com/apache/pulsar/pull/7986

贡献者:

@315157973(https://github.com/315157973)

 Topic Policy: 支持在 Topic 级别设置卸载策略。

PR 地址:

https://github.com/apache/pulsar/pull/7883

贡献者:

@315157973(https://github.com/315157973)

Topic Policy: 支持在 Topic 级别设置、获取和移除 maxProducers。

PR 地址:

https://github.com/apache/pulsar/pull/7914

贡献者:

@zhanghaou(https://github.com/zhanghaou)

Topic Policy: 支持在 Topic 级别设置、获取和移除压缩阈值。

PR 地址:

https://github.com/apache/pulsar/pull/7881

贡献者: 

@hangc0276(https://github.com/hangc0276)

 Broker: Pulsar Functions 的消费者/生产者属性支持主机名。

PR 地址:

https://github.com/apache/pulsar/pull/7897

贡献者:

@jerrypeng(https://github.com/jerrypeng)

Broker: Pulsar primitive schema 支持 Java 8 日期和时间类型。

PR 地址:

https://github.com/apache/pulsar/pull/7874

贡献者:

@jianyun8023(https://github.com/jianyun8023)

Broker: BatchPushSource 支持异步通知错误。

PR 地址:

https://github.com/apache/pulsar/pull/7865/files 

贡献者:

@jerrypeng(https://github.com/jerrypeng)

 Broker: 支持在 Topic 级别上设置消息发送速率的流控。

PR 地址:

https://github.com/apache/pulsar/pull/7863 

贡献者:

@hangc0276(https://github.com/hangc0276)

重要 Bug 修复

因修复内容较多,仅列举较重要修复内容,不包括本周全部动态

下面修复均已 Merge 进 Pulsar 主分支

 Broker: 修复 broker 端确认消息时出现的 NPE(空指针异常)问题。

PR 地址:

https://github.com/apache/pulsar/pull/7937

贡献者:

@Technoboy-(https://github.com/Technoboy-)

Broker: 在 Key_Shared 订阅模式下,当消费者无法消费消息造成临时跳过消息时,暂停发布消息。

PR 地址:

https://github.com/apache/pulsar/pull/7553

贡献者:

@equanz(https://github.com/equanz)

   

Metrics: 修复提供错误信息的 Pulsar metrics。

PR 地址:

https://github.com/apache/pulsar/pull/7905

贡献者:

@315157973(https://github.com/315157973)

 CPP Client: 确保 BatchAcknowledgementTracker 和 UnAckedMessageTrackerEnabled 的 clear() 方法线程安全。

PR 地址:

https://github.com/apache/pulsar/pull/7862 

贡献者:

@BewareMyPower(https://github.com/BewareMyPower)

Broker: 通过 Ledger ID 划分消息范围,并将其存储在 individualDeletedMessages 中。

PR 地址:

https://github.com/apache/pulsar/pull/7861 

贡献者:

@massakam(https://github.com/massakam)

 Broker: 修复添加消费者时发生的死锁问题。

PR 地址:

https://github.com/apache/pulsar/pull/7841 

贡献者:

@massakam(https://github.com/massakam)

CPP Client: 异常处理中,抛出 std::exception 类来代替 char*。

PR 地址:

https://github.com/apache/pulsar/pull/7798 

贡献者:

@Bklyn(https://github.com/Bklyn)

活动和新闻

 TGIP每周直播:Pulsar 及其生态系统

往期视频参考:
https://streamnative.io/resource#tgip

本周日 TGIP 会对近期社区小伙伴提出的问题进行解答,由 Apache Pulsar PMC 成员李鹏辉为大家线上答疑解惑。参与本周日的TGIP-CN 025: 《 答疑专场,有问题您就来》

StreamNative 在线研讨会 - "Managing Real-Time Data Teams"

主讲人:Jesse Anderson,Big Data Institute 大数据专家。

PPT 链接:

https://www.slideshare.net/JesseAnderson/managing-realtime-data-teams

研讨会回放链接:

https://www.youtube.com/watch?v=Owl_ncQbVwk

活动预告

➡️ Pulsar Summit Asia 2020 官网上线,正式开始演讲征集

大会官网链接:

https://pulsar-summit.org/zh/event/asia-2020

➡️ 9月9日:"Apache Pulsar: Under the Hood for Java Developers"

分享嘉宾:Addison Higham

报名链接:

http://meetup.com/JavaIL/events/272501454/

 推荐阅读

➡️ Apache Pulsar 2.6.1 版本更新,详情阅读博客:

https://streamnative.io/blog/tech/2020-08-21-pulsar-261

➡️ Apache Pulsar 社区贡献者人数突破 300 位

https://streamnative.io/blog/tech/2020-08-24-pulsar-300-contributors

➡️ 《The role of Apache BookKeeper in Apache Pulsar - part 1》

作者:Bartosz Konieczny

文章链接:

https://www.waitingforcode.com/apache-pulsar/role-apache-bookkeeper-apache-pulsar-part-1/read

➡️ 《10 Reasons for Choosing Apache Pulsar over Apache Kafka》

作者:Maximilian Michels

 


作为全球性开源项目,截至 2020 年 9 月 4 日,Apache Pulsar 已拥有超出 300 名贡献者、6.5K+ Star 、1.6K+ Fork 。正是由于分布在全球各地的社区开发者的贡献,才使得 Apache Pulsar 项目不断发展与前进。

让我们期待下一周的 Apache Pulsar 周报!

如果你也想为 Apache Pulsar 项目出一份力、成为我们的 contributor,参考下面链接,来加入我们吧: