RocketMQ介绍与实现原理1、简介2、服务发现2.1 路由注册2.2 路由删除2.3 路由发现2.4 总结3、RocketMQ消息发送3.1 消息发送基本流程3.1.1 消息批量发送3.1.2 消息发送异常机制4、RocketMQ消息存储4.1 消息发送存储流程4.2 过期文件删除机制5、消息的消费5.1 消息拉取5.1.1 消息拉取基本流程5.1.1.1 消息拉取客户端消息拉取请求封装5.
转载
2024-06-24 08:32:48
29阅读
介绍功能 1、应用解耦 复杂的应用里会存在多个子系统，如果各个子系统之间的耦合性太高，整体系统的可用性就会大幅降低。比如一个电商系统，任何一个子系统出了故障或者因为升级等原因暂时不可用，都会造成下单操作异常，影响用户使用体验。 当转变成基于消息队列的方式后，系统可用性就高多了，比如物流系统因为发生故障，需要几分钟的时间来修复，在这几分钟的时间里，物流系统要处理的内容被缓存在消息队列里，用户的下单操
转载
2023-12-18 18:32:00
69阅读
目录一、普通消息：1.消息发送分类：（1）同步发送消息：（2）异步发送消息：（3）单向发送消息：2.普通消息代码举例：定义生产者：（1）同步发消息生产者：Sync（2）异步消息发送生产者：Async（3）单向消息发送生产者：定义消费者：二、顺序消息：三、延迟消息：四、事务消息：五、批量消息：六、消息过滤：七、消息发送重试机制：八、消费重试机制：九、死信队列： 一、普通消息：1.消息发送分类：（1
转载
2023-11-20 07:06:40
25阅读
一般执行比较耗时的代码操作时，都可以交给mq异步实现接口：比如使用mq异步发送优惠券、扣库存，异步发送短信、邮件，也可以异步收集系统日志从而和应用服务进行解耦等多种应用场景； 客户端发送请求到服务端，服务端相应的接口接收到请求后会开启线程进行处理，如果执行代码需要较长时间，接口响应比较慢，导致客户端一直处于阻塞状态；对于上面提到的比较耗时、不可控的业务逻辑处理接口，可以采用多线程或者mq
转载
2023-10-26 15:33:37
36阅读
JAVA Soket、ServerSocket通信IP地址和端口号打开命令提示符输入 ：cmd，输入ipconfig后按下回车，找到ivp4地址。它就是你的IP地址。创建一个服务器非常简单，在构造方法里面输入一个端口号，这个端口号有一个范围0~65535： ServerSocket server=new ServerSocket(9090); 如果你看到这样的异常信息：java.net.Bin
转载
2023-09-20 10:30:39
68阅读
正文简介RocketMQ是一个纯Java、分布式、队列模型的开源消息中间件，前身是MetaQ，是阿里参考Kafka特点研发的一个队列模型的消息中间件，后开源给apache基金会成为了apache的顶级开源项目，具有高性能、高可靠、高实时、分布式特点。功能发布/订阅消息传递模型 财务级交易消息 各种跨语言客户端，例如Java，C / C ++，Python，Go 可插拔的传输协议，例如TCP，SSL
转载
2024-01-04 06:45:24
108阅读
一、阿里云官网---帮助文档按照官网步骤，创建Topic、申请发布(生产者)、申请订阅(消费者)二、代码1、配置：public class MqConfig {
/**
* 启动测试之前请替换如下 XXX 为您的配置
*/
public static final String PUBLIC_TOPIC = "test";//公网测试
public static final String PUBLI
转载
2024-01-25 20:31:45
88阅读
三: indexFile除了通过通常的指定Topic进行消息消费外，RocketMQ还提供了根据key进行消息查询的功能。该查询是通过store目录中的index子目录中的indexFile进行索引实现的快速查询。这个indexFile中的索引数据是在如果包含了key的消息被生产者发送到Broker时写入的。如果消息中没有包含key，则不会写入。1. 索引条目结构每个Broker中会包含一组ind
转载
2024-04-10 17:52:53
211阅读
1. 消息队列的使用场景消息队列的使用场景有很多，最核心的有三个：解耦、异步、削峰解耦：一个系统或者一个模块，调用了多个系统或者模块，相互之间的调用很复杂，维护起来很麻烦。此时可以考虑使用消息队列来实现多个系统之间的解耦异步：系统A接受一个请求，需要在自己本地写库，还需要在系统BCD三个系统写库，同步操作比较费时。削峰：高峰时段系统接收到的请求缓存到消息队列，供系统根据负载慢慢消化2. 消息队列的
转载
2024-03-31 18:50:48
91阅读
消息存储结构、消息存储机制、读写分离机制Broker消息 存储结构Broker存储概述为什么写文件这么快Broker消息 存储机制Broker消息存储的流程1.Broker 接收 客户端 发送消息的请求 并做 预处理2.Broker存储前 预处理 消息2.1 设置请求处理返回对象标志2.2 存储前 发送请求 的 数据检查3. 消息校验和存储模块检查4.将消息写入CommitLog延迟消息处理(待
转载
2024-06-28 11:05:08
58阅读
从今天起，开始Rocket MQ系列。这位MQ经过了双11这种变态级别冲击的洗礼，有稳定出色的表现，作为我们这样的技术人员很有必要研究一下它。先从以下几个方面对RocketMQ入个门：消息队列介绍Rocket MQ介绍Rocket MQ安装使用消息队列什么是「消息队列」呢？队列，大家肯定都不陌生了，在数据结构中，它是一种先进先出的结构。消息队列可以看成是一个容器，里面存放各种消息，这些消息代表业务
转载
2024-06-09 00:51:36
71阅读
文章目录CommitLog文件讲解概述文件结构`CommitLog`类分析字段属性分析内部类分析消息提交`CommitRealTimeService`消息异步刷盘`FlushRealTimeService`消息同步刷盘`GroupCommitService`内部类的启动个关闭方法分析构造方法文件加载`load`获取消息`getData`添加消息`putMessage`和`putMessages`
转载
2024-01-03 20:39:02
73阅读
RocketMQ作为消息队列中间件，肯定有消息存储的机制，毕竟提供高可靠的消息投递功能，at least once保证每条消息至少被消费一次。rmq的消息存储机制由几个核心的类提供服务，组织起来的。MapFile类是对磁盘文件的抽象管理对象，MapFileQueue类是对一系列同类磁盘文件的，按照文件内第一个数据偏移量为名字排序的MapFile队列。CommitLog类就是对磁盘commitlog
转载
2023-12-15 09:50:17
102阅读
RocketMQ简介RocketMQ是由阿里捐赠给Apache的一款低延迟、高并发、高可用、高可靠的分布式消息中间件。经历 了淘宝双十一的洗礼。RocketMQ既可为分布式应用系统提供异步解耦和削峰填谷的能力，同时也具备 互联网应用所需的海量消息堆积、高吞吐、可靠重试等特性。官方文档： https://rocketmq.apache.org/docs/quick-start/github中文主页：
转载
2023-12-11 11:25:02
83阅读
RocketMQ应用一、测试环境工程准备二、消息响应1.消息发送的状态-SendStatus2.producer消息Id-msgId3.broker消息Id-offsetMsgId三、普通消息1.消息发送分类1.1 同步发送消息1.2 异步发送消息1.3 单向发送消息2.代码举例2.1 同步消息发送生产者2.2 异步消息发送生产者2.3 单向消息发送生产者2.4 消费者四、顺序消息1.什么是顺序
转载
2024-06-07 11:50:28
28阅读
什么是rocketmqRocketMQ 是阿里巴巴开源的消息队列中间件。具有下列特点：能够保证严格的消息顺序提供丰富的消息拉取模式高效的订阅者水平扩展能力亿级消息堆积能力事务消息“严格的消息顺序” 是指在需要的情况下，可以使 producer 发送的消息被 consumer 顺序的接收； “丰富的消息拉取模式” 是指可以选择 pull 或 push 两种消息消费模式(但是其实都是 consumer
转载
2024-01-22 23:13:39
91阅读
根据官方文档 rocketmq/features.md at master · apache/rocketmq · GitHub显示，RocketMQ 有如下几个特性：订阅与发布消息的发布是指某个生产者向某个 topic 发送消息；消息的订阅是指某个消费者关注了某个 topic 中带有某些 tag 的消息，进而从该 topic 消费数据。消息顺序消息有序指的是一类消息消费时，能按照发送的顺序来消费
转载
2024-01-31 10:01:55
69阅读
RocketMQ消息存储是整个系统的核心，直接决定着吞吐性能和高可用性。RocketMQ存储消息并没有借助oracle、mysql等关系型数据库，而是直接操作文件。借助java NIO的力量，使得I/O性能十分高。当消息来的时候，顺序写入CommitLog。为了Consumer消费消息的时候，能够方便的根据topic查询消息，在CommitLog的基础上衍生出了CosumerQueue文件，存放了
转载
2023-09-28 22:53:22
121阅读
# RocketMQ的Java配置详解
RocketMQ是阿里巴巴开源的一款分布式消息中间件，广泛应用于大规模企业级应用系统中。在现代应用开发中，使用消息队列可以有效降低系统耦合度，提升系统的可伸缩性。本文将为你介绍如何在Java中进行RocketMQ的配置与使用，并提供代码示例，帮助你更好地理解这一技术。
## RocketMQ基础概念
在深入讨论配置之前，首先了解一些基本概念是必要的：
原创
2024-10-08 06:05:05
81阅读
RocketMQ4.x和RocketMQ5.0在CommitLog的设计上面基本上没有太多调整，还是沿用了之前的设计。下面来对CommitLog的设计思想和源码进行分析。RocketMQ版本5.0.01. CommitLog示意图CommitLog是对RocketMQ的存储的抽象，示意图如下：CommitLogMappedFileQueue： 主要用来操作相关数据存储文件。将一系列的MappedF
转载
2024-03-04 17:54:00
96阅读
