脉冲星 6 月脉动 | 2.6.0 版本强势来袭，Summit 完美落幕！

转载

ApachePulsar 2021-08-20 15:47:31

本月看点速览

产品动态
- 新增 PIP
- 新增功能（2.6.0）
- Bug 修复（2.6.0）
社区动态
- 海内外社区动态
- 技术干货

产品动态

2020 年 6 月 18 日，Apache Pulsar 正式发布了 2.6.0 版本！Pulsar 2.6.0 版本新增了诸多功能，并修复了大量漏洞，覆盖存储端、Broker 端、客户端、Pulsar Functions、Pulsar IO、Pulsar SQL、Pulsar proxy 和安全等多方面，一如既往地丰富和完善了 Pulsar 作为一个云原生流数据平台的能力。

更多详情参考：Apache Pulsar 2.6.0 重磅发布，新特性独家解读

同时本月也发布了 Pulsar Go Client 0.1.1 版本。继 Go CLient 0.1.0 发布以来，Go Client 因其强大的易用性得到广泛用户的青睐。同时，也吸引越来越多的用户进一步丰富 Go Client 特性并修复其中的一些 Bug。

更多详情参考：Go Client 0.1.1 版本发布

同时关于 Pulsar Client 在本月也是相继发布了 1.3.0 和 1.4.0 版本。

更多详情可参考：
https://www.nuget.org/packages/Pulsar.Client/1.3.0
https://www.nuget.org/packages/Pulsar.Client/1.4.0

新增 PIP

PIP 66: Function Mesh（2.6.0）

Pulsar Functions 已成为用于简单实时消息处理场景的便捷工具。它允许用户使用最少的接口来实现业务逻辑，然后直接提交给现有的 Pulsar 集群以执行。简单性有两个方面：简单的接口和简单的部署方式。

用户无需学习复杂的框架使用即可简单的在 Pulsar Function 上工作。而且，他们也不需要建立和维护新的流处理基础架构集群即可运行这些功能。

由于功能已经使用了一段时间，因此我们意识到，更多的场景需要将多个 Functions 组织在一起的工作。在 Function Mesh 的支持下，用户可以轻松地表达和管理多 Functions 的工作。

另外，此支持还提供了更高级别的抽象DSL的可能性，以进一步简化作业组成。我们称此新功能为 “Function Mesh”。

PIP 67: 将 Pulsarctl 回馈给 Apache Pulsar

Pulsarctl 是 pulsar-admin 的替代工具，用于管理 Apache Pulsar 中的资源。Pulsarctl 是用 Go 编写的，基于 Pulsar REST API。

它为 Go 开发人员提供 API 接口和用户友好的命令，使与 Pulsar Client 的交互变得更加容易。

与 pulsar-admin 相比，Pulsarctl 更加用户友好。Pulsarctl 使用命令所需的依赖关系更少，并提供了更全面的命令描述和用法。

使用 Pulsarctl，用户可以在发生错误时更快地找到并解决问题。

新增功能
（2.6.0）

新增新的 ThresholdShedder

https:///apache/pulsar/pull/6772
Key_Shared 订阅模式中增加一致性 hash consumer 分配策略

https:///apache/pulsar/pull/6791
Pulsar java client 将基于 JNI 的压缩算法库替换为 AirCompressor

https:///apache/pulsar/pull/5390
支持多个 Pulsar 集群使用相同的 BookKeeper 集群

https:///apache/pulsar/pull/5985
支持配置 ZooKeeper 缓存失效时间

https:///apache/pulsar/pull/6668
为 topic 新增精确发送速率限制

https:///apache/pulsar/pull/7078
支持配置等待新消息的延迟

https:///apache/pulsar/pull/7139
支持在没有新消息写入的情况下通过设置 `maxLedgerRolloverTimeMinutes` 参数触发 ledger 切换

https:///apache/pulsar/pull/7111

Bug 修复

（2.6.0）

修复新增 consumer 时，KeyShared 模式下消息分发出现的乱序问题

https:///apache/pulsar/pull/7106

https:///apache/pulsar/pull/7108
修复 consumer 读取 batch message 时导致内存使用过多的问题

https:///apache/pulsar/pull/6719
修复 backlog 指标持续增长的问题

https:///apache/pulsar/pull/7082
修复创建 producer 时指定不存在的 topic 导致的内存泄漏问题

https:///apache/pulsar/pull/7120

https:///apache/pulsar/pull/7124
修复消息重复发送至 Dead letter topic 的问题

https:///apache/pulsar/pull/7021
修复 Pulsar SQL 使用多个 zookeeper 地址的问题

https:///apache/pulsar/pull/6947

社区动态

Pulsar Summit 2020 圆满结束

为期两天的线上全球会议 Pulsar Summit 2020 圆满结束，Pulsar 社区的大佬们也为大家带来了 30+ 的主题分享，干货满满。

所有的回放视频和 Slides 可以参考 StreamNative 官网：
https://streamnative.io/resource#pulsar-summit

同时在 Pulsar Summit 进行之前，6 月 11-12 日和 6 月 15-16 日也相继举办了「 Pulsar training - Developing Pulsar Applications」的课程集训，由高级工程师 Jesse Anderson 为大家带来紧锣密鼓的课程。

TGIP 系列更新

TGIP

013: Pulsar Schema and Presto SQL

https:///watch?v=01IZV4npVPo
014: Pulsar Schema and Flink Integration

https:///watch?v=Tc6vwyzzsh4

TGIP-CN

015: 跨城实践中，腾讯如何应用 Apache Pulsar

AoP 宣布开源

6 月 17 日，StreamNative 和中国移动宣布将 “AoP”（AMQP on Pulsar）开源。AoP 将 AMQP 协议处理插件引入 Pulsar broker。这样一来，Apache Pulsar 就支持原生 AMQP 协议。

将 AoP 协议处理插件添加到现有 Pulsar 集群后，用户不用修改代码就可以将现有的 RabbitMQ 应用程序和服务迁移到 Pulsar。

参与其他科技性会议

在本月 Flink Forward 会议中，来自 StreamNative 的工程师吕能为大家分享了关于 Pulsar 相关的话题——Build your next-generation stream platform based on Apache Pulsar。

视频回放：
http:///build-your-next-generation-stream-platform-based-on-apache-pulsar-neng-lu/

在 Scala in the City Conference 中，Andreas Koestler 为大家分享了关于 Pulsar 相关的话题 “Scaling out WebSockets, Streams, Communicating FSMs and Apache Pulsar!”

更多详情参考：

https://www.signifytechnology.com/blog/2020/06/connecting-millions-of-users-by-andreas-koestler-at-scala-in-the-city-conference

技术博客

如何使用 OpenTracing 和 Jaeger 追踪 Pulsar 消息
为什么选择 Apache BookKeeper - Part 1
使用 GCS offloader 卸载存储在 BookKeeper 中的数据
Apache Pulsar walks into a data bar
https://lenses.io/blog/2020/06/apache-pulsar-walks-data-bar/?utm_source=Twitter&utm_medium=Social_Channels&utm_campaign=tweet_5_june
Event-driven Functions with Apache Pulsar & Project Flogo
https://hackernoon.com/event-driven-functions-with-apache-pulsar-and-project-flogo-wag3y4u
Creating an External Scaler for KEDA
https:///@krvarma/creating-an-external-scaler-for-keda-31b314b5c4a3