文章目录架构生产者（Producer）消费者（Consumer）Name Server功能：路由注册：无状态方式的优缺点：路由剔除：路由发现：客户端NameServer选择策略Broker功能模块图集群部署工作流程流程：Topic的创建模式读/写队列架构RocketMQ主要分为四部分组成：生产者（Producer）消息生产者，负责生产消息。Producer通过MQ的负载均衡模块选择相应的Broke
转载
2023-07-10 22:35:41
44阅读
一、前言 RocketMq是阿里贡献Apache消息中间件项目，采用java语言开发，经过阿里历年双十一流量洪峰的洗礼，并发性和可靠性经过了充分的验证，且支持的功能丰富，是活跃度较高的中间件之一，特别在国内市场。二、架构RocketMq由四部分组成，如下：NameServer，名字服务，每个NameServer维护全量的broker，topic路由的相关信息。
一.生产消息 一条消息只能由Producer Group中一个实例生产并发送至BrokerServer。二.保存/传递消息 BrokerServer接收到消息后，会根据消息的Topic（主题）将消息保存至相应的Queue（队列）中。Topic可以理解为消息【键】，而消息中保存的信息便是消息【值】。 
转载
2023-10-13 20:11:33
73阅读
内容导读：MQ作为一款中间件，就需要承载全公司所有业务系统使用需求，并高效稳定运行。因此，MQ对本身运行效率有着非常苛刻的诉求。为了实现高效率，其实需要很多方面一起配合来完成。比如存储方式...
转载
2022-03-03 15:50:47
36阅读
一、 Rocketmq概念及原理探讨 图片转自Rocketmq官网 RocketMQ架构上主要分为四部分，如上图所示:1、Producer：消息发布的角色，支持分布式集群方式部署。Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递，投递的过程支持快速失败并且低延迟。2、Consumer：消息消费的角色，支持分布式集群方式部署。支持以push推，pull拉两种模式对消息
转载
2024-01-30 19:49:51
127阅读
目录一、概述二、CommitLog文件三、ConsumerQueue消费逻辑队列四、IndexFile索引文件五、页缓存与内存映射一、概述RocketMQ中的消息存储在本地文件系统中，主要是由ConsumeQueue和CommitLog配合完成的，消息真正的物理存储文件是CommitLog，ConsumeQueue是消息的逻辑队列，类似数据库的索引文件，存储的是指向物理存储的地址。每个Topic下
转载
2024-04-09 09:22:04
75阅读
RocketMQ是一种分布式消息中间件，广泛应用于大规模的数据处理和通信场景。在RocketMQ中，消息的持久化存储是非常重要的一部分。本文将介绍RocketMQ的存储机制，并通过代码示例展示如何使用RocketMQ进行消息的持久化存储。
## 存储介绍
RocketMQ的存储主要包括两部分：CommitLog和Consumer Offset。CommitLog是消息的持久化存储，用于保存生产
原创
2024-01-12 18:45:22
58阅读
最近对 RocketMQ 的存储结构学习了一下，写一篇总结记录一下自己对其的一个研究和理解。先简单说一下 RocketMQ 的总体架构。 RocketMQ 的总体架构 RocketMQ由四个组件构成，分别是Producer、Consumer、Broker 和 NameServer。 Producer
转载
2021-05-07 20:21:00
468阅读
2评论
RocketMq的存储模型
原创
2023-01-07 00:31:45
122阅读
消息存储整体架构我们先把RocketMQ github上的消息存储图荡下来
原创
2022-08-04 11:22:10
562阅读
个人博客第1章 RocketMQ概述一、MQ概述1 、MQ简介MQ，Message Queue，是一种提供消息队列服务的中间件，也称为消息中间件，是一套提供了消息生产、存储、消费全过程API的软件系统。消息即数据。一般消息的体量不会很大。2 、MQ用途从网上可以查看到很多的关于MQ用途的叙述，但总结起来其实就以下三点。限流削峰 MQ可以将系统的超量请求暂存其中，以便系统后期可以慢慢进行处理，从而避
转载
2024-01-02 16:57:07
57阅读
一、概念和特性基本概念1 、消息模型（Message Model） RocketMQ主要由 Producer、Broker、Consumer 三部分组成，其中Producer 负责生产消息，Consumer 负责消费消息，Broker 负责存储消息。Broker 在实际部署过程中对应一台服务器，每个 Broker 可以存储多个Topic的消息，每个Topic的消息也可以分片存储于不同的 Broke
转载
2023-08-22 08:44:24
150阅读
RocketMQ 结构概述Apache RocketMQ是一个分布式消息传递和流平台，具有低延迟，高性能和可靠性，万亿级容量和灵活的可扩展性。它由四部分组成：NameServer、broker、producer 和 consumer。它们中的每一个都可以水平扩展而没有单点故障。 如上图所示。NameServer集群NameServer提供轻量级服务发现和路由。每个NameServer记录完整的路由
转载
2023-07-29 16:00:43
117阅读
RocketMQ因为有高可靠性的要求(宕机不丢失数据)，所以数据要进行持久化存储。所以RocketMQ采用文件进行存储。
原创
2022-07-21 09:00:00
91阅读
点赞
简介：Springboot2.x整合RocketMQ4.x实战，加入相关依赖，开发生产者代码 先启动nameser和broker，命令如下start mqnamesrv.cmd和start mqbroker.cmd -n 127.0.0.1:9876 autoCreateTopicEnable=true &
转载
2024-09-05 15:32:04
8阅读
文件的存储路径配置broker.properties#存储路径storePathRootDir=/app/rocketmq/store#commitLog 存储路径storePathComm
原创
2022-07-04 11:01:59
603阅读
## 实现RocketMQ数据存储
欢迎来到RocketMQ数据存储的教程。在这篇文章中，我将向您展示如何使用RocketMQ来存储数据。RocketMQ是一个高性能、低延迟、高可靠的分布式消息中间件，广泛应用于异步通信、日志处理、数据传输等领域。
### 流程概述
接下来，让我们通过以下表格了解实现RocketMQ数据存储的整个流程：
| 步骤 | 描述 |
| ---- | ----
原创
2024-05-23 10:24:00
117阅读
转载：RocketMQ源码学习--消息存储篇 消息中间件—RocketMQ消息存储（一） RocketMQ高性能之底层存储设计 存储架构 RMQ存储架构 上图即为RocketMQ的消息存储整体架构，RocketMQ采用的是混合型的存储结构，即为Broker单个实例下所有的队列共用一个日志数据文件（即
转载
2019-03-08 15:27:00
267阅读
2评论
上节文《RocketMQ（一）基础概念理解及消息消费模式解析》讲解了RocketMQ基础的一些概念和消息消费模式，这篇文章主要介绍RocketMQ的技术架构设计以及部署架构概念的讲解架构设计RocketMQ的主要架构图示：技术架构RocketMQ架构上主要分为四部分，如上图所示:Producer：发布（生产）消息的角色，支持分布式集群方式部署。Producer通过MQ的负载均衡模块选择相应的Bro
转载
2023-10-11 06:04:50
96阅读
RocketMQ源于阿里，原名MetaQ，后捐献给apache，支持Java、C/C++、Python、Go；是一款分布式、队列模型的开源消息中间件，经历了几年淘宝双十一的考验。架构设计核心特性NameServer路由中心/注册中心，管理Broker，类似于kafka中的zookeeper，负责Broker节点注册，Producer和Consumer发送和消费消息会先去NameServer中查找可
转载
2024-03-27 11:04:54
73阅读
