常见的几种消息队列及其特点

当前生产环境,使用较多的消息队列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,RocketMQ等。

1. ActiveMQ:

ActiveMQ是Apache出品,最流行的,能力强劲的开源消息总线,并且它一个完全支持JMS规范的消息中间件。其丰富的API、多种集群构建模式使得它成为业界老牌消息中间件,在中小型企业中应用广泛。
但是其性能稍差,在面对高并发的情况下,会出现消息阻塞、堆积、延迟等问题。

2. Kafka

Kafka是LinkedIn开源的分布式发布-订阅消息系统,目前归属于Apache顶级项目。
主要特点就是基于Pull的模式来处理消息消费,追求高吞吐量,一开始的目的就是用于日志收集和传输。0.8版本开始支持复制,不支持事务,对消息的重复、丢失、错误没有严格要求,适合产生大量数据的互联网服务的数据收集业务。因为基于操作系统低层的Page Cache,仅仅使用内存管理,不存在内存和磁盘之间的IO操作,所以kafka能够支持廉价的服务器上以每秒100k条数据的吞吐量。(有ack机制,可以保证不丢失,不能保证不重复。)

3. RocketMQ

RocketMQ是阿里开源的消息中间件,已孵化为Apache顶级项目,纯Java开发,具有高吞吐量、高可靠性、适合大规模分布式系统应用的特点。RocketMQ思路起源于Kafka,它对消息的可靠传输以及事务性做了优化,在2.0版本,RocketMQ集群通过Zookeeper进行管理,在3.0之后,放弃Zookeeper,使用NameServer进行集群的管理和协调。
特点
能够保障消息的顺序消费,提供了丰富的消息拉取等处理模式,消费者可以高效进行水平扩展,能够承载上亿级别数据量级。
可以支持多种集群架构模式:Master-Slave模式、双Master-Slave模式、多主多从模式等等。
支持多种刷盘策略:同步双写、异步复制。借助了零拷贝等技术。

4. RabbitMQ

RabbitMQ是一个开源的消息代理和队列服务器,用来通过普通协议在不同的应用之间共享数据(跨平台跨语言)。RabbitMQ是使用Erlang语言编写,并且基于AMQP协议实现。
特点

  • 可靠性:使用了一些机制来保证可靠性,比如持久化、传输确认、发布确认。
  • 灵活的路由:在消息进入队列之前,通过Exchange来路由消息。对于典型的路由功能,Rabbit已经提供了一些内置的Exchange来实现。针对更复杂的路由功能,可以将多个Exchange绑定在一起,也通过插件机制实现自己的Exchange。
  • 消息集群:多个RabbitMQ服务器可以组成一个集群,形成一个逻辑Broker。
  • 高可用:队列可以在集群中的机器上进行镜像,使得在部分节点出问题的情况下队列仍然可用。
  • 多种协议:支持多种消息队列协议,如STOMP、MQTT等。
  • 多种语言客户端:几乎支持所有常用语言,比如Java、.NET、Ruby等。
  • 管理界面:提供了易用的用户界面,使得用户可以监控和管理消息Broker的许多方面。
  • 跟踪机制:如果消息异常,RabbitMQ提供了消息的跟踪机制,使用者可以找出发生了什么。
  • 插件机制:提供了许多插件,来从多方面进行扩展,也可以编辑自己的插件。

消息队列中的消息有顺序依赖 消息队列有几种_java


Kafka、RabbitMQ、RocketMQ消息中间件的对比Kafka vs RocketMQ——单机系统可靠性

Kafka vs RocketMQ—— Topic数量对单机性能的影响