Rocket MQ 结构体系

Overview 概述

Apache RocketMQ是一个低延迟、高性能和可靠的分布式消息中间件。由四部分组成：names server名字服务器、brokers经纪人、producers生产者、cosumers消费者。并且每个组成部分都可以水平扩展。

NameServer Cluster 名字服务集群

Name servers 提供轻量级查找与路由服务。第个name server记录完整的路由信息，提供对应的读或者写操作服务，并且支持快速存储扩展。

Broker Cluster 经纪人集群

Brokers通过提供轻量的TOPIC和QUEUE机制进行消息存储。它们支持Push和Pull模型，包含容错机制，加强了尖端与容量的填充。另外，Brokers提供灾备恢复，数据统计，和预警机制等传统消息系统中所欠缺部分。

Producer Cluster 生产者集群

Producers支持分布式发布。分布式的producers通过多重负载均衡模型向bokers集群发送消息。

Consumer Cluster 消费者集群

Consumers集群在Push/Pull模型中同样支持分布式发布。同时也支持集群消费与消息广播。它提供实时消息订阅机制可以满足绝大部分消费需求。

NAMESERVER 名字服务器

NameServer是一个完全的功能服务，主要包含两点：

  • Broker Management:NameServer接收来自Broker集群的注册，同时提供心跳机制来检查Broker是否还存活。
  • Routing Management:每个NameServer都会持有全部的Broker集群路由信息和客户端请求队列信息。

RocketMQ客户端（Producer/Consumer）会向NameServer请求排队路由信息，但是客户端怎么找到NameServer的地址呢？有如下四种方式：

  • 编程方式，如：producer.setNamesrvAddr(“ip:port”).
  • JAVA选项，使用：rocketma.namesrv.addr.
  • 环境变量，使用:NAMESRV_ADDR.
  • HTTP Endpoint.

更多关于怎么找到NameServer地址细节，点击here.

BROKER SERVER 经纪人（代理）服务器

Broker 服务负责消息的存储和发送，消息查询，高可用集群保证等等。

Broker服务包含一些重要的子模块：

  • Remoting Module：broker服务的入口，处理来自客户端的请求。
  • Client Manager：管理客户端（生产者和消费者），维护消费者的主题订阅。
  • Store Service：提供存储到物理磁盘和从物理磁盘读取消息的简单API。
  • HA Service：提供主Broker与从Broker服务之间的数据同步功能。
  • Index Service：给指定的key创建索引并且提供快带查询。