最近有个需求是做一个消息队列的技术组件。

技术比较:

特性

ActiveMQ

RabbitMQ

RocketMQ

Kalfa

单机吞吐量

万级

万级

10万级

10万级

topic 数量对吞吐量的影响

 

 

topic 可以达到几百/几千的级别,吞吐量会有较小幅度的下降。

topic 从几十到几百个时候,吞吐量会大幅度下降

时效性

ms 级

微秒级,延迟最低

ms 级

延迟在 ms 级以内

可用性

高,基于主从架构实现高可用

高,基于主从架构实现高可用

非常高,分布式架构

非常高,分布式,一个数据多个副本,少数机器宕机,不会丢失数据,不会导致不可用

可靠性

有较低的概率丢失数据

基本不丢

经过参数优化配置,可以做到 0 丢失

经过参数优化配置,可以做到 0 丢失

功能支持

MQ 领域的功能极其完备

基于 erlang 开发,并发能力很强,性能极好,延时很低

MQ 功能较为完善,还是分布式的,扩展性好

功能较为简单,主要支持简单的 MQ 功能,在大数据领域的实时计算以及日志采集被大规模使用

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

更加详细的比较在下面图片处:

开源消息队列对比 消息队列exchange_开源消息队列对比

可以看出,几种mq可以说是各有优劣。各位可根据自己公司需求来决定使用什么mq。

根据我们公司需求,我决定选用rabbitMQ。

一些对于消息队列的核心概念:

Message :消息,消息是不具名的,它由消息头和消息体组成。

Publisher:消息的生产者,也是一个向交换器发布消息的客户端应用程序

Exchange:交换器,用来接收生产者发送的消息并将这些消息路由给服务器中的队列。Exchange有4种类型: direct(默认), fanout, topic, 和headers,不同类型的Exchange转发消息的策略有所区别

Queue:消息队列,用来保存消息直到发送给消费者。它是消息的容器,也是消息的终点。一个消息可投入一个或多个队列。消息一直在队列里面,等待消费者连接到这个队列将其取走。

Binding:绑定,用于消息队列和交换器之间的关联。

Connection:网络连接,比如一个TCP连接。

Channel:信道,多路复用连接中的一条独立的双向数据流通道。

Consumer:消息的消费者,表示一个从消息队列中取得消息的客户端应用程序。

Virtual Host:虚拟主机,表示一批交换器、消息队列和相关对象。RabbitMQ 默认的 vhost 是 / 。