关于 Apache Pulsar
Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。GitHub 地址:http:///apache/pulsar/
随着信息技术的迅猛发展,数据已经渗透到每一个行业和业务职能领域,数据重要性与价值已毋庸置疑。而日前刚结束的 ApacheCon 2021 大会,让大家了解到大数据蓬勃的发展态势。趁着热潮,也为了给大数据爱好者们提供一个近距离的交流平台,畅谈大数据技术前沿与行业发展,Big Data Online Meetup,暨大数据线上技术交流会将在 8 月 21 日(本周六)下午举行。大会由 openLooKeng 社区共同发起,诚邀大数据领域的前沿专家,分享介绍大数据技术的最新发展与实践。
本次交流会由 Apache Pulsar、Spark、Apache Kyuubi、openLooKeng、Apache Dolphin Scheduler 社区共同参与,每个社区都为与会者准备了社区最前沿的大数据技术分享。Pulsar 社区将由 StreamNative 工程师盛宇帆出席,分享演讲《打造批流融合:基于 Flink 的全新 Pulsar Connector 的设计、开发和使用》,为听众解锁集成 Apache Pulsar 与 Apache Flink、云原生环境下批流融合的最佳解决方案。
演讲简介
对于 Flink 而言 Pulsar 是一个新鲜而又熟悉的老朋友,早在 19 年,我们就有计划给 Flink 社区提交 Pulsar Connector 的代码。随着 Pulsar 社区的壮大,对于流批一体化的实际,这一贡献进度翻开了全新的篇章。Pulsar 的小伙伴将基于全新的 Flink Source 和 Sink API 重新设计并开发了 Pulsar Connector,并将合并到 Flink 的代码仓库进行维护。本次演讲,我们将提前学习和理解当前的 Pulsar Connector 如何打通 Flink 和 Pulsar 之前的壁垒。为大家介绍升级版批流融合:如何使用全新的 Pulsar Connector 开发 Flink 应用来使用 Pulsar。

















