前段时间浪尖推荐过一套奈学的pulsar课程，很多粉丝问浪尖pulsar到底值不值得学习，会不会替代kafka。浪尖个人2018年的时候就接触了pulsar，而且贡献了一点点代码到社区里，解决了一个和flink整合的bug。今天是整理一篇文章来简单介绍下pulsar。1. pulsar的架构首先，我们先看下pulsar官网给出的pulsar架构，如下图：从架构图中，pulsar集群主要四大模块：1
转载
2024-05-15 02:44:46
90阅读
**Apache Pulsar—比 kafka 更加优秀的消息队列** 文章目录Apache Pulsar---比 kafka 更加优秀的消息队列前言一、Pulsar是什么？二、订阅模型三、路由策略与持久化四、整体架构应用优势应用案例 前言众所周知，消息队列有两种形式，一种是点对点的队列模式，一种是发布订阅模式。而Pulsar是发布订阅模式的分布式消息平台，拥有灵活的消息模型和直观的客户端API。
转载
2024-05-19 18:20:28
51阅读
随着互联网的高速发展，用户规模与业务并发量开始急剧增加，海量的请求需要接收和存储，业务需要中间件来实现削峰填谷；业务也在不断发展，企业内部的系统数量也在不断地增长，不同语言开发出来的系统需要统一的事件驱动；大数据、AI已经成为很多业务中不可或缺的技术，它们都需要统一的数据源。越来越多的场景离不开消息队列，稍具规模的业务，消息队列都是“标配”。有的人可能会问，现在消息队列已经非常成熟了，我们可以使用
转载
2024-08-07 10:28:59
137阅读
就可以通过kafka console producer 和consumer或者java程序和pulsar构造出来的"kafka”交换数据了。三、编辑broker.conf(如果是集群)或者standa路径修改）
原创
2024-05-02 12:43:06
125阅读
Apache Pulsa的架构与核心概念 Pulsar基本架构Pulsar采用存储计算分离的架构，pulsar使用了bookkeeper做消息的存储，bookkeeper保证了消息存储的可靠性和高效性，bookkeeper为pulsar提供了存储的扩展能力Pulsar使用zk做元数据存储多租户，pulsar最初的设计就是支持多租户的命名空间：一个租户可以有多个命名空间，一个topic属于一个命名空
转载
2024-03-17 14:49:13
138阅读
今天InfoWorld最佳开源数据平台奖公布，连续两年入选的 Kafka 这次意外失手，pulsar取而代之。pulsar最初由Yahoo开发，并于2016年底开源，现在是Apache软件基金会的一个孵化器项目。Pulsar在Yahoo的生产环境运行了三年多，助力Yahoo的主要应用，如Yahoo Mail、Yahoo Finance、Yahoo Sports、Flickr、Gemini广告平台和
转载
2024-05-13 09:43:34
33阅读
Spring Boot 作为主流微服务框架，拥有成熟的社区生态。市场应用广泛，为了方便大家，整理了一个基于spring boot的常用中间件快速集成入门系列手册，涉及RPC、缓存、消息队列、分库分表、注册中心、分布式配置等常用开源组件，大概有几十篇文章，陆续会开放出来，感兴趣同学请提前关注&收藏Pulsar 介绍Pulsar 是 Yahoo 在 2013 年创建的，2016年贡献给了 Ap
转载
2024-03-12 16:23:57
981阅读
1. RabbitMQ特点协议支持：支持 AMQP（高级消息队列协议），以及 STOMP 和 MQTT 等协议。消息传递模式：支持点对点（P2P）、发布订阅（Pub/Sub）、路由模式（Topic Exchange）。消息可靠性：支持持久化消息、确认机制、死信队列（DLQ）。高可用性：支持镜像队列，确保消息在主节点故障时仍可被消费。性能：适合中小规模的消息传递，高吞吐量但性能略逊于 Kafka。扩
一 、为什么使用消息队列 此问题主要从两方面回答：1、消息队列的使用场景解耦、异步任务、流量削峰。 场景1： 解耦接口调用发送。假设现在要新增子系统E或删除其中某一个子系统，那么A系统都需要做程序修改。此时存在这样的问题：A系统与其它的子系统产生了严重的耦合。 解决案：使用 MQ，A
转载
2024-10-22 14:36:36
25阅读
前言对于开发云原生分布式应用程序的开发人员来说，他们应该把更多的精力放在应用程序和微服务上，而不是把时间浪费在处理复杂的消息基础设施上，他们需要一些解决方案帮助他们管理好这些基础设施。 构建消息基础设施的第一步是选择合适的消息中间件技术。在这方面有很多选择，从各种开源框架（如 RabbitMQ、ActiveMQ、NATS）到一些商用产品（如 IBM MQ 或者 RedHat AMQ）。当然，除了这
转载
2024-04-07 12:54:16
83阅读
?摘要今天分享下 —— Apache Pulsar–简单介绍 的一些基本知识，欢迎关注！?官方文档查看官网文档地址?Apache Pulsar 是什么？一句话说：是一个云原生的批流一体的在诸多场景优于 Kafka 的新一代的消息队列中间件。?Apache Pulsar 有哪些特性？Apache Pulsar 采用计算与存储分离的分层架构设计，支持多租户、持久化存储、多机房跨区域数据复制，具有强一致
转载
2024-09-01 23:40:56
20阅读
文章目录Apache Pulsar诞生背景及追求诞生背景发展历程追求、愿景安装部署安装参考相关知识介绍消息消费模型生产(发布)消费模型ACK机制消息的保留策略对比Kafka系统架构以及设计理念pulsar的分层架构部署架构存储和服务分离Pulsar的监控和报警Pulsar的其他应用DemoPulsar的应用场景与案例Apache BookKeeper术语和定义Bookeeper部署架构总结 Ap
pulsar最初由Yahoo开发，并于2016年底开源，现在是Apache软件基金会的一个孵化器项目。Pulsar在Yahoo的生产环境运行了三年多，助力Yahoo的主要应用，如Yahoo Mail、Yahoo Finance、Yahoo Sports、Flickr、Gemini广告平台和Yahoo分布式键值存储系统Sherpa。pulsar和kafka最显而易见的区别是，pulsar支持多租户，
pulsar的背景介绍之前大多数人喜欢用mq或者kafka,但是pulsar结合了两者并做了许多优化，使其成为高性能、易扩展、多租户、跨地域复制的 pub-sub 消息系统，其在雅虎平台的消息通知、邮件队列、日志管道都有很好的支持，雅虎有15000台服务器，每月浏览量有700亿，可见pulsar的性能很客观，pulsar在腾讯计费场景下也有很好的支持，可见pulsar即将成为下一代消息处理机制指日
文末留言送书活动本文向读者介绍两个优秀的分布式消息流平台：Kafka与Pulsar。Apache Kafka（简称Kafka）是由LinkedIn公司开发的分布式消息流平台，于2011年开源。Kafka是使用Scala和Java编写的，当下已成为最流行的分布式消息流平台之一。Kafka基于发布/订阅模式，具有高吞吐、可持久化、可水平扩展、支持流数据处理等特性。Apache Pulsar（简称Pul
转载
2024-03-15 10:30:31
57阅读
Pulsar与Kafka一样是分布式消息中间件Pulsar特性：1.线性扩展。能够丝滑的扩容到成百上千个节点(Kafka扩容需要占用很多系统资源在节点间拷贝数据，而Plusar完全不用)2.高吞吐。每秒数百万消息3.低延迟。在大规模的消息量下依然能够保持低延迟(< 5ms)4.持久化机制。Plusar的持久化机制构建在Apache BookKeeper之上，提供了写与读之前的IO隔离5.基于
转载
2024-03-15 09:47:16
58阅读
Pulsar的前世今生Apache Pulsar是一个发布-订阅消息系统，使用计算与存储分离的云原生架构。Pulsar 2018年9月成为ASF顶级项目，近两年，随着社区不断发展和诸多企业的应用和贡献，Pulsar作为一个云原生的分布式消息流平台，越来越频繁地出现在人们的视野中，大有替代Kafka江湖地位的趋势。Pulsar和Kafka的对比Pulsar和Kafka架构上最大的不同是，Kafka由
转载
2024-07-18 08:51:20
485阅读
Pulsar github 下载地址 https://github.com/apache/pulsar.git那么为什么我们使用Apache Pulsar构建我们的消息服务呢？1.流和队列 一起Apache Pulsar就像两个产品一样。它不仅可以处理像Kafka这样的高速实时用例，而且还支持标准的消息队列模式，例如竞争消费者，故障转移订阅和简单的消息扇出。 Apache Pulsar会自动跟踪主
转载
2024-03-18 11:11:38
33阅读
架构图多租户支持Pulsar 支持多租户，即允许不同的用户共享同一个集群而互不干扰。这种能力在一些场景下是非常有用的，例如云服务提供商需要为多个客户提供消息服务的情况。Kafka 没有原生的多租户支持，尽管可以通过一些工具和技巧来实现。灵活的消息传递保证Pulsar 提供了灵活的消息传递保证，例如在多副本集群中，可以通过配置来控制消息的复制和确认方式。Pulsar 也支持多种消息传递保证，例如精确
转载
2024-02-27 17:53:13
80阅读
背景分析消息队列这个类型的组件一直是非常重要的组件，当经过两家企业后我就很坚信这个结论了。队列这种东西，最广泛的作用还是在于解耦，宽泛一点的说，它可以将不同部门的工作内容进行有效的整合，基于一个约定好的格式，就可以两头互相不干扰的进行开发。可以说这个生产消费的思想不仅仅适用于程序也适用于非常多的地方。目前对于我看到的来说，kafka更多的还是做为一个数据源，数据桥梁的作用，不同业务之间的沟通。比如
