在RocketMQ-3.1.9版本中，有TransactionStateService类，用于存储每条事务消息的状态。在该类中有两个成员变量tranRedoLog:ConsumeQueue和tranStateTable: MapedFileQueue,其中tranRedoLog变量用于事务状态的Redolog，当进程意外宕掉，可通过redolog恢复所有事务的状态，tranStateTable变量
broker消息接收，假设接收的是一个普通消息(即没有事务)，此处分析也只分析master上动作逻辑，不涉及ha。
1. 如何找到消息接收处理入口可以通过broker的监听端口10911顺藤摸瓜式的找到 NettyClientConfig.setListenPort-->BrokerStartup-->BrokerController-->NettyRemotingServerc
转载
2024-09-30 18:46:39
59阅读
在分布式系统中经常遇到类似的场景： 本地执行DB业务操作，并通知微服务执行其他的业务操作。这里就涉及到数据一致性的问题，如何保证两个系统的操作同时成功或者同时失败?Rocketmq事务消息可以保证业务与消息发送这两个操作的强一致性，为大家提供了一种思路。传统的操作:事物{ 1.调用接口 2.业务逻辑处理}上述传统操作存
四、总结面试被问：Broker收到消息后怎么持久化的？回答者：有两种方式：同步和异步。一般选择异步，同步效率低，但是更可靠。消息存储大致原理是：核心类MappedFile对应的是每个commitlog文件，MappedFileQueue相当于文件夹，管理所有的文件，还有一个管理者CommitLog对象，他负责提供一些操作。具体的是Broker端拿到消息后先将消息、topic、queue等内容存到B
转载
2024-10-17 05:41:46
26阅读
发送普通消息 普通消息，也叫并发消息，是发送效率最高、使用场景最多的一类消息。发送普通消息的代码如下：public static void main(String[] args) throws MQClientException, InterruptedException {
// 创建默认的生产者
消息生产者启动之后，我们就可以按照需要发送消息了，消息发送之前，首先需要获取主题的路由信息，只有获取了这些信息我们才知道消息要发送到具体的Broker节点。查找主题的路由信息tryToFindTopicPublishlnfo 是查找主题的路由信息的方法。如果生产者中缓存了 topic 的路由信息，如果该路由信息中包含了消息队列，则直接返回该路由信息，如果没有缓存 或没有包含消息队列， 则向 Nam
转载
2024-10-03 12:16:52
122阅读
摘要默认消息发送超时时间为3s默认消息发送是同步的发送模式，同步发送会发送1+重试次数，默认重试2，一共3次消息内容不能为0，也不能超过4M同步消息发送才会有重试机制，异步发送和oneway发送模式都只有一次发送机会。同步发送 1+重试次数（默认2）pull模式、push模式启动的时候都不会检查nameserv，pull模式在fetchqueue时没有nameserv时会报错，push模式没有
转载
2024-10-10 10:31:34
124阅读
一、发送 & 接收同步消息1.1、前置说明 Java操作RocketMQ系列文章是基于Maven项目进行演示的，所以大家只需要新建一个普通的Maven项目，然后将pom、常量信息粘进自己的代码中即可！后续会补充SpringBoot中如何操作RocketMQ，万事万物都是先易后难，先简单后复杂。不说
转载
2024-10-14 07:15:51
216阅读
1 介绍RocketMQ作为一款纯java、分布式、队列模型的开源消息中间件，支持事务消息、顺序消息、批量消息、定时消息、消息回溯等。1.1 RocketMQ 特点支持发布/订阅（Pub/Sub）和点对点（P2P）消息模型在一个队列中可靠的先进先出（FIFO）和严格的顺序传递 （RocketMQ可以保证严格的消息顺序，而ActiveMQ无法保证）支持拉（pull）和推（push）两种消息模式pul
1. 前言本篇主要从源码分析消息的发送及存储。rocketmq发送消息分为三种实现方式：可靠同步发送、可靠异步发送、单向发送。目前的MQ中间件从存储模型来看，分为需要持久化和不需要持久化两种。本篇文章会分析rocketmq的消息存储机制。2. RocketMQ 消息先看看rocketmq 消息封装类org.apache.rocketmq.common.message.Message基本属性：主题t
RocketMQ 介绍RocketMQ 是一款开源的分布式消息系统，基于高可用分布式集群技术，提供低延时的、高可靠的消息发布与订阅服务。同时，广泛应用于多个领域，包括异步通信解耦、企业解决方案、金融支付、电信、电子商务、快递物流、广告营销、社交、即时通信、移动应用、手游、视频、物联网、车联网等。具有以下特点：能够保证严格的消息顺序提供丰富的消息拉取模式高效的订阅者水平扩展能力实时的消息订阅机制亿级
本篇文章将使用RocketMQ以三种方式发送消息：可靠的同步，可靠的异步和单向传输。并介绍下负载均衡模式与广播模式的区别：（1）同步发送消息： 在重要的通知消息，SMS通知，SMS营销系统等广泛的场景中使用可靠的同步传输。 生产者代码：/**
* 发
一、初识RocketMQ 我们平时使用一些体育新闻软件，会订阅自己喜欢的一些球队板块，当有作者发表文章到相关的板块，我们就能收到相关的新闻推送。 发布-订阅（Pub/Sub）是一种消息范式，消息的发送者（称为发布
转载
2024-07-15 00:14:38
159阅读
RocketMQ 专题RocketMQ 专题三1. 高级功能1.1 消息存储1.1.1 存储介质1.1.3 消息的存储和发送1）消息存储1.1.4 消息存储结构1.1.5 刷盘机制1）同步刷盘2）异步刷盘1.2 高可用性机制1.2.1 消息消费高可用1.2.2 消息发送高可用1.2.3 消息主从复制1.3 负载均衡1.3.1 Producer负载均衡1.3.2 Consumer负载均衡1）集群模
1、问题现象首先接到项目反馈使用 RocketMQ 会出现如下错误： 错误信息关键点：MQBrokerException：CODE:2 DESC:[TIMEOUT_CLEAN_QUEUE]broker busy,start flow control for a while,period in queue：205ms，size of queue:880。 由于项目组并没有对消息发送失败做任何补偿
最近阅读了Rocketmq关于pullmessage的实现方式，分享出来 众所周知，Rocketmq在consumer端是拉取消息的方式，它会在客户端维护一个PullRequestQueue，这个是一个阻塞队列（LinkedBlockingQueue），内部的节点是PullRequest，每一个PullRequest代表了一个消费的分组单元 PullRequest会记录一个to
消息发送首先来看一个RcoketMQ发送消息的例子：@Service
public class MQService {
@Autowired
DefaultMQProducer defaultMQProducer;
public void sendMsg() {
String msg = "我是一条消息";
// 创建消息，指定TOPIC
转载
2024-06-23 09:56:49
323阅读
前言分布式消息选型的时候是否支持事务消息是一个很重要的考量点，而目前只有RocketMQ对事务消息支持的最好。今天我们来唠唠如何实现RocketMQ的事务消息！Apache RocketMQ在4.3.0版中已经支持分布式事务消息，这里RocketMQ采用了2PC的思想来实现了提交事务消息，同时增加一个补偿逻辑来处理二阶段超时或者失败的消息，如下图所示。RocketMQ事务流程概要Roc
基于RocketMQ release-4.9.3，深入的介绍了Broker接收消息源码入口。此前我们学习了RocketMQ的Producer发送消息的源码，首先会查找查找topic的发布信息，然后找到一个消息队列MessageQueue，默认是轮询的选择，MessageQueue中存储着对应的brokerName，通过brokerName就能找到具体的brokerIP，随后获取producer客户
作者：kinnylee来源：https://0x9.me/wPORU背景介绍项目组使用阿里RocketMQ，对同一个消费组设置不同的tag订阅关系，出现消息丢失的问题，本文从rocketmq源码研究消息发布与订阅原理，并分析导致该问题的原因。官方说明告诉使用者：同一个消费组，必须保持订阅关系一致为什么？它没有说！只能从源码找答案 问题复现1.启动消费者1，消费组为group1，订阅topi
