Pulsar Function 允许你编写函数对 topic 中的数据进行一些处理，函数的输入就是一个或多个 topic 中的消息，函数的返回值可以发送到其他 topic 中。官网的一张图就能看明白了：比方说，发送到 topicA 中的消息都是英文单词，我想把这些英文单词都转化成大写并转发到 topicB 中，那么就可以写一个 Pulsar function 做这个事情。Pulsar Functi
转载
2024-02-12 21:54:56
68阅读
一、简介Apache Kafka是一个快速、可扩展的、高吞吐的、可容错的分布式“发布-订阅”消息系统，使用Scala与Java语言编写，能够将消息从一个端点传递到另一个端点，较之传统的消息中间件（例如ActiveMQ、RabbitMQ），Kafka具有高吞吐量、内置分区、支持消息副本和高容错的特性，非常适合大规模消息处理应用程序1、Kafka架构2、kafka高吞吐率实现Kafka与其它MQ相比，
转载
2024-06-27 13:05:55
60阅读
一、pom.xml依赖<parent<groupIdorg.springframework.boot</groupId<artifactIdspringbootstarterparent</artifactId<version2.7.0</version</parent<dependencies<dependency<groupIdorg.springframework.boot</group
原创
2023-01-07 16:00:07
1181阅读
文章目录前言一、pulsar-thread是什么？二、安装pulsar-thread三、使用说明1. 连接 （client）2. 生产者（producer）3. 消费者（consumer）四、当使用 pulsar-client（pulsar.Client）连接时1. 生产者（producer）2. 消费者（consumer）五、关于schema模式1. schema支持的模式2. schema参
转载
2023-09-05 19:23:36
916阅读
一、Apache Pulsar的Local模式构建1.1、启动服务Standalone Local单机本地模式, 是pulsar最简单的安装方式, 此种方式仅适用于测试学习使用, 并无法作为生产环境中使用。下载Apache Pulsar2.10 apache-pulsar-2.10.0-bin.tar.gz服务器系统要求:Currently, Pulsar is available for 64-
转载
2024-02-19 08:17:39
106阅读
1 Pulsar特性总结Pulsar作为下一代云原生分布式消息流平台，它集消息、存储、轻量化函数式计算为一体。最初在 Yahoo 内部开发和部署，支持过Yahoo 应用服务平台 140 万个主题，日处理超过 1000 亿条消息。 Pulsar 于 2016 年由&nb
转载
2024-03-09 19:23:46
76阅读
就可以通过kafka console producer 和consumer或者java程序和pulsar构造出来的"kafka”交换数据了。三、编辑broker.conf(如果是集群)或者standa路径修改）
原创
2024-05-02 12:43:06
129阅读
安装Pular单集群安装准备服务器准备建议方案实验环境组件下载单机启动集群部署安装jdk关闭防火墙部署pulsar配置zk配置bookie配置broker部署pulsar-manager 安装准备官方的安装文档：https://pulsar.apache.org/docs/2.11.x/deploy-bare-metal/服务器准备建议方案服务器配置 pular在bkenv.sh和pulsar_
转载
2024-03-09 20:17:57
224阅读
**Apache Pulsar—比 kafka 更加优秀的消息队列** 文章目录Apache Pulsar---比 kafka 更加优秀的消息队列前言一、Pulsar是什么？二、订阅模型三、路由策略与持久化四、整体架构应用优势应用案例 前言众所周知，消息队列有两种形式，一种是点对点的队列模式，一种是发布订阅模式。而Pulsar是发布订阅模式的分布式消息平台，拥有灵活的消息模型和直观的客户端API。
转载
2024-05-19 18:20:28
51阅读
引言 https://pulsar.apache.org/docs/deploy-bare-metal/Apache Pulsar越来越多的公司使用，与Apache Kafka、Apache RocketMQ并列成为消息领域三家马车，有必要对其研究一番。下面以笔者曾在生产环境使用的配置梳理，内容提要：Pulsar的安装与部署Pulsar集群的验证生产环境机器配置生产环境内存分配生产环境b
转载
2024-01-30 06:12:21
311阅读
前段时间浪尖推荐过一套奈学的pulsar课程，很多粉丝问浪尖pulsar到底值不值得学习，会不会替代kafka。浪尖个人2018年的时候就接触了pulsar，而且贡献了一点点代码到社区里，解决了一个和flink整合的bug。今天是整理一篇文章来简单介绍下pulsar。1. pulsar的架构首先，我们先看下pulsar官网给出的pulsar架构，如下图：从架构图中，pulsar集群主要四大模块：1
转载
2024-05-15 02:44:46
90阅读
本文是《用 Pulsar 开发多人在线小游戏》的第三篇，配套源码和全部文档参见我的 GitHub 仓库 play-with-pulsar 以及我的文章列表。最详尽的部署方法参见官网：https://pulsar.apache.org/这里我介绍下 Pulsar 的架构原理，搞明白之后就能很容易理解 Pulsar 的各种部署方式了。Pulsar 集群的关键组件如下图所示，Pulsar 集群包含一个或
转载
2024-03-09 19:23:19
749阅读
随着互联网的高速发展，用户规模与业务并发量开始急剧增加，海量的请求需要接收和存储，业务需要中间件来实现削峰填谷；业务也在不断发展，企业内部的系统数量也在不断地增长，不同语言开发出来的系统需要统一的事件驱动；大数据、AI已经成为很多业务中不可或缺的技术，它们都需要统一的数据源。越来越多的场景离不开消息队列，稍具规模的业务，消息队列都是“标配”。有的人可能会问，现在消息队列已经非常成熟了，我们可以使用
转载
2024-08-07 10:28:59
137阅读
本文主要讲解SpringBoot整合RabbitMQ实现延迟消息的过程，详细介绍：直连交换机、扇型交换、主题交换机的使用
一、直连交换机、扇型交换、主题交换机的使用1、首先创建rabbitmq-provider，pom.xml里导入相关的依赖：<!--rabbitmq-->
<dependency>
<groupId>org.
转载
2024-02-14 14:15:22
215阅读
Pulsar安装部署（单节点）参考：pulsar-4：单机部署pulsar单节点集群 - 云+社区 - 腾讯云1、安装包下载wget https://archive.apache.org/dist/pulsar/pulsar-2.8.0/apache-pulsar-2.8.0-bin.tar.gz解压$ tar -xzvf apache-pulsar-2.8.0-bin.tar.gz -
转载
2024-03-23 16:53:35
175阅读
上一篇介绍了消费者请求拉取消息，最后发送给消费者。本章介绍消费者接收。一、客户端消息接收入口public class ClientCnx {
protected void handleMessage(CommandMessage cmdMessage, ByteBuf headersAndPayload) {
checkArgument(state == State.Re
转载
2024-07-20 18:01:40
105阅读
就像Windows分区一样，分成C盘和D盘，然后把“我的文档”放在D盘里面。如果不挂载，就是全都在C盘，也可以。多挂载就是重装，可以只格式化/挂载的设备，不用格式化/home，资料可以保留。快采纳我吧！www.mh456.com防采集。cd /du -h --max-depth=1首先，你得有空余的空2113间，比如，你发现5261你的/home 所在分区还有好多 G
# 如何实现Pulsar Docker
## 引言
Pulsar是一个开源的分布式消息和流平台，可以用于可靠地处理和传递大量数据。使用Docker来部署Pulsar可以简化整个部署和维护过程，本文将指导你如何实现Pulsar Docker部署。
## 整体流程
以下是实现Pulsar Docker的整体流程：
```mermaid
journey
title Pulsar Docke
原创
2023-11-01 12:21:25
74阅读
本文主要介绍使用 Java 来操作 Pulsar，文中所使用到的软件版本：Java 17.0.7(Pulsar 服务使用)、Java 1.8.0_341(客户端使用)、Pul
背景许久没有分享 Java 相关的问题排查了，最近帮同事一起排查了一个问题：在使用 Pulsar 消费时，发生了同一条消息反复消费的情况。排查当他告诉我这个现象的时候我就持怀疑态度，根据之前使用的经验 Pulsar 在官方文档以及 API 中都解释过：只有当设置了消费的 ackTimeout 并超时消费时才会重复投递消息，默认情况下是关闭的，查看代码也确实没有开启。那会不会是调用了 negativ
