文章目录前言一、消息轨迹二、消息轨迹源码分析1、producer端2、consumer端三、消息轨迹中存储的信息1.TraceContext2.TraceBean3.TraceType四、总结 前言 本篇文章将会从以下方面介绍消息轨迹：什么是消息轨迹？如何启用消息轨迹？示例demo、消息轨迹的源码分析和消息轨迹中存储的信息。最后会用一张图来总结消息轨迹的工作原理。一、消息轨迹1.什么是消息轨迹
Broker CommitLog 索引机制 绝大部分存储组件都有索引机制，RocketMQ 也一样，有巨量堆积能力的同时，通过索引可以加快读取和查询。一、索引的数据结构： 索引，是为增加查询速度而设计的一种数据结构。在 RocketMQ 中也是以文件形式保存在 Broker 中的。Broker中有2种索引：Consumer QueueIndex File 第一种，Consumer Queue
转载
2024-04-16 13:29:15
151阅读
1. 存储设计 RocketMQ存储文件主要包括：CommitLog文件、ConsumerQueue文件、Index文件CommitLog文件：所有Topic的消息按照抵达顺序依次追加到CommitLog中，一旦写入不支持修改 ConsumeQueue文件：消息消费队列，用于消费者消费，即消费者通过此文件来从CommitLog中获取消息。消息达到CommitLog后，将异步转发到ConsumeQu
1、RocketMQ原理学习--RocketMQ源码运行 2、RocketMQ原理学习--RocketMQ整体架构窥探 3、RocketMQ原理学习--消息类型 4、RocketMQ原理学习-- Name Server 5、RocketMQ原理学习---生产者普通消息发送 6、RocketMQ原理学习---生产者事物消息发送 7、RocketM...
原创
2022-08-26 10:01:20
135阅读
分布式事务消息、消息索引机制
原创
2022-08-26 14:16:29
86阅读
在云原生场景下，对象存储能够为用户提供弹性和按量付费的能力，有效降低存储成本，但对随机读写的支持不够友好。RocketMQ 的队列模型中写入的数据是按时间近似有序的，对于随机索引热数据实现了 non-stop write 的特性，同时支持冷热分离，使用异步归整的方式冷数据转移到更廉价存储系统中。
原创
2024-01-17 17:19:34
90阅读
中冷热分离的随机索引模块详解一、背景介绍的冷热分离架构的冷热分离架构是指在消息存储上，将冷数据和热数据分别存储在不同的存储介质中，以提高消息的读写性能和存储成本效率。在这个二级标题中，我们将详细介绍 RocketMQ 冷热分离架构的原理和优势。首先，我们将介绍冷热分离的概念及其在消息存储中的应用场景。然后，我们将讨论冷热分离架构的实现方式，包括如何根据消息的特性进行冷热分类，以及不同存储介质的选择
原创
2023-12-21 22:41:54
161阅读
的冷热分离架构是指在消息存储上，将冷数据和热数据分别存储在不同的存储介质中，以提高消息的读写性能和存储成本效率。在这
原创
2024-01-05 10:30:13
156阅读
RocketMQ 结构概述Apache RocketMQ是一个分布式消息传递和流平台，具有低延迟，高性能和可靠性，万亿级容量和灵活的可扩展性。它由四部分组成：NameServer、broker、producer 和 consumer。它们中的每一个都可以水平扩展而没有单点故障。 如上图所示。NameServer集群NameServer提供轻量级服务发现和路由。每个NameServer记录完整的路由
转载
2023-07-29 16:00:43
117阅读
参考官方安装文档：https://rocketmq.apache.org/docs/quick-start/本次安装环境为Ubuntu 20。准备工作：正式安装：解压建立软连接启动name server修改配置文件runserver.sh中的jvm参数，生产环境无需修改，测试环境可能因内存不足无法启动。由原来的修改为启动：启动broker修改配置文件runbroker.sh中的jvm参数，生产环境无需修改，测试环境可能因内存不足无法启动。由原来的改为启动生产和消费
原创
2022-07-04 20:00:00
337阅读
Metaq1.x是RocketMQ前身的第一个版本，本质上把Kafka做了一次java版本的重写（Kafka是scala语言开发）。Meta2.x，主要是对存储部分进行了优化，因为kafka的数据存储，它的partition是一个全量的复制，在阿里、在淘宝的这种海量交易。Kafka这种机制的横向拓展是非常不好的。2012年阿里同时把Meta2.0从阿里内部开源出来，取名RocketMQ，同时为了命名上的规范（版本上延续），所以这个就是RocketMQ3.0。现在RocketMQ主要维护的是4.x的版本，也是
原创
2022-07-05 08:00:00
255阅读
RocketMQ高级:RocketMQ集群,RocketMQ控制台,RocketMQ高级特性:主从数据复制，负载均衡，消息重试，死信队列，消息重复消费与消息幂等
原创
2022-01-04 10:59:11
1772阅读
MQ MQ（Message Queue）是一种跨进程的通信机制，用于传递消息。通俗的说，就是一个先进先出的数据结构。 应用场景一：异步解耦 异步解耦是消息队列的主要特点，主要目的是减少相应时间和解耦。主要的使用场景就是将比较耗时而且不需要即时（同步）返回结果的操作作为消息放入消息队列。同时，由于使用
转载
2020-11-11 16:44:00
161阅读
2评论
什么是消息队列（message queue） 消息队列就是基础数据结构中的 先进先出 的一种数据机构，可以简单的理解为生活中买东西时的排队消费，先排队，先消费、结算。 消息队列主要解决问题：流量削峰、消息分发、异步消息 1、流量削峰：例如系统最多可以处理1万条请求，但在高峰期的时间有更多的请求，这个 ...
转载
2021-08-13 17:22:00
589阅读
目录RocketMQ基础简介:优点:专业术语:Rocket环境搭建RocketMQ 集群方式--单个Master 模式--`多Master 模式`--`多Master 多Slave 模式, 异步复制(特别高并发使用)`--`多Master 多Slave模式, 同步双写`具体配置(双Master模式)部署管理控制台--简单实现RocketMQ基础简介:RocketMQ 是一款分布...
原创
2021-08-30 14:04:50
240阅读
RocketMQ简介RocketMQ是一款分布式、队列模型的消息中间件，具有以下特点：1.能够保证严格的消息顺序2.提供丰富的消息拉取模式3.高效的订阅者水平扩展能力4.实时的消息订阅机制5.亿级消息堆积能力二：安装RocketMQ下载源码首先我们从githup上获取RocketMQ的源码，目前最新的版本为3.5.8，下载地址为：https://github.com/alibaba/RocketM
转载
2018-03-05 17:21:07
941阅读
来自官网：http://rocketmq.apache.org/docs/quick-start/
转载
2021-07-10 14:50:00
189阅读
2评论
应用场景 主要作用解耦、滑峰填谷 异构系统的整合，这个问题比较容易理解，在原阿里SOA ESB比较火的年代，很多异构系统需要进行互联互通。 应用和应用之间的松耦合，这个在阿里巴巴内部很多的同步链路到异步链路里面，使用的非常多。 事件驱动机制和复杂事件架构模型里面的Backbone，底层的机制可以通过
转载
2018-08-01 16:18:00
273阅读
2评论
专业术语 Producer 消息生产者，生产者的作用就是将消息发送到 MQ，生产者本身既可以产生消息，如读取文本信息等。也可以对外提供接口，由外部应用来调用接口，再由生产者将收到的消息发送到 MQ。 Producer Group 生产者组，简单来说就是多个发送同一类消息的生产者称之为一个生产者组。在
转载
2017-11-08 16:39:00
148阅读
2评论
1. 下载安装包，解压 2. cmd 3. 启动 mqnameserv 4. 启动 mqbroker
转载
2017-01-08 21:34:00
115阅读
2评论
