ApachePulsar的博客_Pulsar干货,Apache Pulsar资讯,开源(7)

KoP 正式开源：在 Apache Pulsar 上支持原生 Kafka 协议

我们很高兴地宣布 StreamNative 和 OVHcloud 开源了 “KoP“（Kafka on Pulsar）。KoP 将 Kafka 协议处理插件引入 Pulsar broker。这样一来，Apache Pulsar 就支持原生 Apache Kafka 协议。将 KoP 协议处理插件添加到现有 Pulsar 集群后，用户不用修改代码就可以将现有的 Kafka 应用程序和服务迁移到 Pu

Pulsar

kafka

apache

偏移量

原创 2022-04-01 17:51:45 410 阅读

TGIP-CN 018: Pulsar Functions

本周末的 TGIP-CN，将由 StreamNative 的高级工程师：冉小龙（Apache 龙）为大家带来关于 Pulsar Functions 相关的话题讨论。你可以在 1 小时的直播时间内，获取关于 Pulsar Functions 相关的干货和内容，也可以在直播结束后进行 Q&A 互动。在群内接收相关直播更新关于 TGIP-CNTGIP 就是 T

js

html

css

编程语言

java

转载 2022-04-01 17:51:24 138 阅读

基于 Pulsar Functions 的事件处理设计模式

原作者：David Kjerrumgaard 翻译：StreamNative——Sijia本文将介绍一些常见的实时流式传输模式及其实现。模式 1：动态路由首先回顾一下如何使用 Apache Pulsar Functions 实现基于内容的路由。基于内容的路由是一种集成模式。该模式已经存在多年，通常用于事件中心和消息框架中。基本思路是检查每条消息的内容，根据消息内容将消息路由到不同目的地。下面的例

apache

数据

滑动窗口

翻译 2022-04-01 17:49:40 104 阅读

Pulsar namespace 策略的简单小介绍

首先来简单回顾下上周 Pulsar 的动态：Set message TTL on topic levelhttps://github.com/apache/pulsar/pull/7738Set retention on topic levelhttps://github.com/apache/pulsar/pull/7747Support consume transaction messages

java

kafka

redis

分布式

数据库

转载 2022-04-01 17:49:23 142 阅读

Pulsar 如何应用到数据查询中

首先我们来简单回顾一下 Pulsar上周的新增内容：PR 7646 - Support Set Backlog Quota On Topic Levelhttps://github.com/apache/pulsar/pull/7646PR 4955 - Introduce system topic and topic policies servicehttps://github.com/apac

数据库

数据仓库

大数据

python

java

转载 2022-04-01 17:48:56 244 阅读

Pulsar Functions 的深入小分享

上周末由 Apache 龙为我们带来了 Pulsar Functions 相关的干货分享，整体内容基于 Pulsar Summit 2020 中 Splunk 工程师 Sanjeev Kulkarni 分享的《Pulsar Functions：A Deep Dive》。Pulsar Functions 简单介绍Pulsar Functions 是一个轻量级的计算框架，其主要目的是为了提供一个部署简

运维

python

java

大数据

数据库

转载 2022-04-01 17:48:31 134 阅读

TGIP-CN 021: Pulsar 2.6.1 版本发布前瞻

本周末的 TGIP-CN，将由 StreamNative 的高级工程师：冉小龙为大家带来关于 Pulsar 即将发布的 2.6.1 版本更新细节的预览介绍，预计将在下周上线 2.6.1 版本，敬请期待！你可以在 1 小时的直播时间内，获取关于 Pulsar 最新版本的研发细节和功能介绍，也可以在直播结束后进行 Q&A 互动。在群内接收相关直播更新关于 TGIP-CNTGIP

js

html

css

javascript

java

转载 2022-04-01 17:48:08 115 阅读

TGIP-CN 020: Pulsar namespace policy

本周末的 TGIP-CN，将由 StreamNative 的高级工程师：张勇为大家带来关于 Pulsar namespace policy 相关的干货分享。你可以在 1 小时的直播时间内，获取关于 Pulsar namespace 细节设置或策略相关的干货和内容，也可以在直播结束后进行 Q&A 互动。或者添加 Pulsar Bot，在群内接收相关直播更新关于

js

html

css

编程语言

人工智能

转载 2022-04-01 17:47:49 111 阅读

开源流数据公司 StreamNative 宣布完成数百万美元 Pre-A 轮融资，源码资本领投

开源流数据公司 StreamNative 宣布完成数百万美元 Pre-A 轮融资，源码资本领投Apache 顶级项目 Pulsar 背后的开源流数据公司 StreamNative 宣布完成数百万美元 Pre-A 轮融资，本轮融资由源码资本领投。StreamNative 在创立初期即获得红杉中国种子基金天使轮投资，在本次 Pre-A 轮红杉中国种子基金继续跟投。StreamNative（北京

java

流处理

apache

云服务

opensource

原创 2022-04-01 17:47:31 227 阅读

为什么选择 Apache BookKeeper？（第 1 部分）

原作者：Sijie Guo 翻译: StreamNative——SijiaApache BookKeeper 针对实时工作负载进行了优化，是可扩展、可容错、低延迟的日志存储服务。BookKeeper 最初由雅虎研究院（Yahoo! Research）开发，而后于 2011 年作为 Apache ZooKeeper 的子项目孵化，最终在 2015 年 1 月作为 Apache 的顶

Pulsar

数据

持久性

客户端

翻译 2022-04-01 17:47:14 144 阅读

Apache BookKeeper 简介

原作者：Sijie Guo 翻译：StreamNative——SijiaApache BookKeeper 是企业级存储系统，旨在保证高持久性、一致性与低延迟。Pulsar 由雅虎研究院（Yahoo! Research）开发，旨在实现 Hadoop 分布式文件系统（HDFS）NameNode 的高可用，在此之前，NameNode 不具备高可用特性，存在单点故障的问题。自 2011 年起，

Pulsar

数据

客户端

apache

翻译 2022-04-01 17:46:53 131 阅读

选择 APACHE PULSAR 而非 KAFKA 的另外 5 个原因

原作者：Chris Bartholomew 翻译：StreamNative——Sijia前段时间，我在一篇博客中提到了选择 Apache Pulsar 而不是 Apache Kafka 的 7 个原因。之后我一直在准备一份比较 Kafka 和 Pulsar 的详细报告，并一直与 Pulsar 开源项目的用户交谈，同时也与我们托管的 Pulsar 服务 —— Kafkaesque

Pulsar

kafka

消息传递

多租户

翻译 2022-04-01 17:46:33 83 阅读

Pulsar 与 Kafka 全方位对比（上篇）：功能、性能、用例

越来越多的消息平台开始采用实时流技术，这促进了 Pulsar 的使用与发展。在 2020 年，Pulsar 的受关注度与使用量都有了显著增加。从《财富》百强企业到有前瞻性的初创团队，凡是开发消息平台和事件流应用程序的公司都对 Pulsar 保持关注，一直在激励着 Pulsar 的发展，并且，围绕 Pulsar 项目的生态也有了迅猛发展，近期多家媒体也在对此争相报道。最近的新闻和博客文章都在客观地介

大数据

kafka

数据

事件流

原创 2022-04-01 17:46:04 323 阅读 1收藏

强强联手！Pulsar 联合 TiDB 推出大数据场景数据应用分析解决方案

方案概述大数据时代，各类应用对消息解决方案的要求不仅仅是数据的流动，而是要在持续增长的服务和应用中传输海量数据，进行智能的处理和分析，帮助业务做出更加精准的决策。Pulsar 与 TiDB 联合解决方案提供实时、高吞吐、稳定的数据输出，满足用户在大数据场景中对各类数据的应用与分析需求，广泛适用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等场景。Apache Pulsar简介与优势A

数据库

分布式

大数据

kafka

人工智能

转载 2022-04-01 17:45:17 213 阅读

Pulsar 社区周报｜2020-09-12~ 2020-09-18

关于 Apache PulsarApache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等。导语各位小伙伴们，Pulsar 社区周报来啦！本次 Pulsar 社区周报，为大家呈现 Pulsar c

github

html

git

svn

css

转载 2022-04-01 17:44:49 37 阅读

来咯！Pulsar 2.6.1 版本发布前瞻

在正式分享 2.6.1 版本更新细节之前，冉小龙首先为我们分享了两个相关 PIP 的内容。一个是 PIP-47 中关于「基于时间来进行版本更新」的计划。该 PIP 提出后，从 2.5.0 版本到目前即将发布的 2.6.1 版本中，时间更短、发布频率更高成为最突出的特点。同时反馈周期快，基本是每三个月更新一个大版本。这样用户也可以大概了解版本的一个更新周期，增进了项目透明度。另一个是 PIP-69

java

数据库

大数据

编程语言

kafka

转载 2022-04-01 17:43:40 82 阅读

StreamNative 宣布开源 MoP！

我们很高兴地宣布 StreamNative 开源了 “MoP”（MQTT on Pulsar）。MoP 将 MQTT 协议处理插件引入 Pulsar broker。这样一来，Apache Pulsar 就可以支持原生 MQTT 协议。与 KoP 相似，MoP 是一种可插拔的协议处理插件。将 MoP 协议处理插件添加到现有 Pulsar 集群后，用户不用修改代码就可以将现有的 MQTT 应

java

分布式

kafka

http

redis

转载 2022-04-01 17:43:12 159 阅读

Apache 软件基金会顶级项目 Pulsar 达成新里程碑：全球贡献者超 300 位！

各位 Pulsar 社区小伙伴们：今天我们高兴地宣布 Pulsar 达成新里程碑，全球贡献者超 300 位！距离 Pulsar 实现 200 位贡献者里程碑，仅仅间隔 8 个月！作为 Apache 软件基金会顶级项目，Pulsar 深深植根于社区，取得如此成就也正是得益于自身强大的社区和贡献者群体。感谢 Pulsar 贡献者及社区小伙伴：因你而社区，因你而 Pulsa

github

物联网

html

小程序

java

原创 2022-04-01 17:42:23 141 阅读

Pulsar 社区周报｜2020-08-08 ~ 2020-08-14

关于 Apache PulsarApache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等。导语各位小伙伴们，Pulsar 社区周报来啦！每周 Pulsar 社区周报，为大家呈现 Pulsar 客户端、br

java

github

css

kafka

html

转载 2022-04-01 17:41:30 67 阅读

Apache Pulsar 在 BIGO 的性能调优实战（上）

阅读本文大约需要 10 分钟背景在人工智能技术的支持下，BIGO 基于视频的产品和服务受到广泛欢迎，在 150 多个国家/地区拥有用户，其中包括 Bigo Live（直播）和 Likee（短视频）。Bigo Live 在 150 多个国家/地区兴起，Likee 有 1 亿多用户，并在 Z 世代中很受欢迎。随着业务的迅速增长，BIGO 消息队列平台承载的数据规模出现了成倍增长，下游的在线

运维

大数据

分布式

编程语言

hadoop

原创 2022-04-01 17:40:18 300 阅读

订阅状态的复制？跨机房同步下如何应用

在 Pulsar 里，可以基于 geo-replication 将数据在多个机房进行复制，这个特性主要是复制的消息数据，而今天我们分享的主要是订阅状态的跨机房同步。订阅状态主要指订阅的消...

java

大数据

数据库

kafka

分布式

转载 2022-04-01 17:39:39 79 阅读

开源流数据公司 StreamNative 推出 Pulsar 云服务，推进企业“流优先”进程

Apache 顶级项目 Pulsar 背后的开源流数据公司 StreamNative 宣布，推出基于 Apache Pulsar 的云端服务产品——StreamNative Cloud。该产品的发布，让 Pulsar®-as-a-Service（PaaS）成为现实，加速 Pulsar 推广与落地，助力企业推进“流优先”策略。Apache Pulsar 应用于各行各业Pulsar 作

运维

大数据

java

物联网

分布式

转载 2022-04-01 17:38:50 63 阅读

社区活动 | Apache Pulsar SIG（特别兴趣小组开放）！欢迎大家加入

关于 Apache PulsarApache Pulsar 是 Apache 软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体，采用计算与存储分离架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。GitHub 地址：http://github.com/apache/pulsar/Apache P

java

人工智能

python

大数据

区块链

原创 2022-03-30 16:30:54 121 阅读

社区活动｜ Apache Pulsar 中文开发者与用户组志愿者招募

Apache PulApache Pulsar 社区的发展离不开社区小伙伴们的长时间辛苦付出和奉献，在此向所有社区小伙伴表示由衷的感谢！sar 社区的发展离不开社区小伙伴们的长时间辛苦付出和奉献，在此向所有社区小伙伴表示由衷的感谢！随着 Pulsar 中文社区的发展，越来越多热爱、使用 Pulsar 的小伙伴加入了 Pulsar 技术交流群，并在群内进行技术交流、分享 Pulsar 技术内容。伴随

java

编程语言

人工智能

大数据

python

原创 2022-03-30 16:30:41 331 阅读

项目动态｜Apache Pulsar 2.8.2 版本发布

关于 Apache Pulsar云原生时代消息队列和流融合系统，提供统一的消费模型，支持消息队列和流两种场景，既能为队列场景提供企业级读写服务质量和强一致性保障，又能为流场景提供高吞吐、低延迟；采用存储计算分离架构，支持大集群、多租户、百万级 Topic、跨地域数据复制、持久化存储、分层存储、高可扩展性等企业级和金融级功能。GitHub 地址：http://github.com/apache/pu

java

python

数据库

分布式

kafka

原创 2022-03-30 16:30:09 141 阅读

TGIP-CN 037 报名｜Apache Pulsar 2.10.0 新特性解析

关于 TGIPTGIP 是 Thank God It’s Pulsar 的缩写，灵感来自于谷歌团队的 Thank God It’s Friday，表示工作周快结束了，很快又会有一个欢快的周末。TGIP 主要是向大家科普关于 Pulsar 的一些基础概念，不管是它的架构模式，还是消息之间的传递动态等，你都可以从 TGIP 的直播中获取到。TGIP 的直播通常会安排在周日，不会占用大家太多的时间。利用

java

大数据

分布式

编程语言

人工智能

原创 2022-03-30 16:29:26 183 阅读

博文推荐｜使用 Apache Pulsar 和 Scala 进行事件流处理

本文翻译自《Event Streaming with Apache Pulsar and Scala》，作者 Giannis 。译者信息：姚余钱@深圳觉行科技有限公司，致力于医疗大数据领域。热衷开源，活跃于 Apache Pulsar 社区。本文作者 Giannis Polyzos，StreamNative 高级工程师，主攻 Apache Pulsar 方向。Apache Pulsar

队列

大数据

分布式

python

java

转载 2022-03-30 16:29:02 157 阅读

95 后新生代 Committer 贺张俭：谈谈年轻人的开源观

关于 Apache Pulsar云原生时代消息队列和流融合系统，提供统一的消费模型，支持消息队列和流两种场景，既能为队列场景提供企业级读写服务质量和强一致性保障，又能为流场景提供高吞吐、低延迟；采用存储计算分离架构，支持大集群、多租户、百万级 Topic、跨地域数据复制、持久化存储、分层存储、高可扩展性等企业级和金融级功能。GitHub 地址：http://github.com/apache/pu

单元测试

大数据

编程语言

人工智能

java

原创 2022-03-30 16:28:18 155 阅读

直播回顾｜TGIP-CN 036：Apache Pulsar 最新技术进展与动态

在 3 月 13 日举办的 TGIP 活动上，Apache Pulsar PMC 成员、StreamNative 联合创始人翟佳与大家一起回顾了 Apache Pulsar 在 2021 年所取得的成绩和进展，并深入解读了 2022 年 Pulsar 的技术发展方向和社区动态。本文为该期 TGIP《预见 2022！Apache Pulsar 技术进展与社区动态》直播文字整理版本。回顾视频可点击??

大数据

java

编程语言

人工智能

kafka

转载 2022-03-30 14:36:45 158 阅读

周日直播｜Apache Pulsar 2.10.0 新特性解析

关于 TGIPTGIP 是 Thank God It’s Pulsar 的缩写，灵感来自于谷歌团队的 Thank God It’s Friday，表示工作周快结束了，很快又会有一个欢快的周末。TGIP 主要是向大家科普关于 Pulsar 的一些基础概念，不管是它的架构模式，还是消息之间的传递动态等，你都可以从 TGIP 的直播中获取到。TGIP 的直播通常会安排在周日，不会占用大家太多的时间。利用

java

大数据

分布式

编程语言

人工智能

转载 2022-03-30 14:36:41 134 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

Apache Pulsar