Kafka、RabbitMQ以及RocketMQ的调研对比 一般国内常用的MQ技术有四种实现，ActiveMQ、Kafka、RabbitMQ、RocketMQ，但是其中 ActiveMQ主要是几年以前较多公司使用，现在几乎国内用的公司都很少了。 （1）Kafka的优势和劣势 先来说Kafka，首先Kafka的吞吐量几乎是行业里最优秀的，在常规的机器配置下，一台机器 可以达到每秒
转载
2024-03-19 02:06:05
42阅读
特性ActiveMQRabbitMQRocketMQKafka单机吞吐量万级，吞吐量比RocketMQ和Kafka要低一个数量级万级，吞吐量比RocketMQ和Kafka要低一个数量级10万级，RocketMQ也是可以支撑高吞吐的一个MQ10万级，这是kafka最大的优点就是吞吐量高。一般配合大数据类的系统来进行实时数据计算、日志采集等场景topic数量对吞吐量的影响 top
转载
2024-02-26 20:25:24
43阅读
Kafka、ActiveMQ、RabbitMQ、RocketMQ 有什么优缺点？特性ActiveMQRabbitMQRocketMQKafka单机吞吐量万级，比 RocketMQ、Kafka 低一个数量级同 ActiveMQ10 万级，支撑高吞吐10 万级，高吞吐，一般配合大数据类的系统来进行实时数据计算、日志采集等场景topic 数量对吞吐量的影响 topic 可以达到几百
转载
2024-09-27 19:26:27
63阅读
MQ选型？Kafka： 优点： 吞吐量⾮常⼤，性能⾮常好，集群⾼可⽤。 缺点：会丢数据，功能⽐较单⼀。 使⽤场景：⽇志分析、⼤数据采集。RabbitMQ： 优点： 消息可靠性⾼，功能全⾯。 缺点：吞吐量⽐较低，消息积累会严重影响性能。erlang语⾔不好定制。 使⽤场景：⼩规模场景。RocketMQ： 优点：⾼吞吐、⾼性能、⾼可⽤，功能⾮常全⾯。 缺点：开源版功能不如云上商业版。官⽅⽂档和周边⽣态
转载
2024-05-15 10:22:17
2069阅读
目录一、消息存储二、消息事务三、负载均衡四、集群方式五、管理界面六、可用性七、吞吐TPS八、订阅形式以及消息分发九、消息顺序十、消息确认十一、消息回溯十二、消息重试十三、并发度一、消息存储Kafka：内存、磁盘、数据库。支持大量堆积。kafka的最小存储单元是分区，一个topic包含多个分区，kafka创建主题时，这些分区会被分配在多个服务器上，通常一个broker一台服务器。分区首领会均匀地分布
转载
2024-09-09 22:39:14
21阅读
Kafka和RabbitMQ都是流行的消息中间件系统，用于实现分布式系统中的消息传递。它们有一些相同点和不同点，下面是它们的主要相同点和不同点：相同点：消息传递：Kafka和RabbitMQ都支持异步消息传递，可以在分布式系统中传递消息。可靠性：两者都提供了持久化机制，保证消息的可靠性传递。高吞吐量：Kafka和RabbitMQ都具有高吞吐量的特性，能够处理大量的消息。可扩展性：两者都支持水平扩展
在双十一过程中投入同样的硬件资源，Kafka 搭建的日志集群单个Topic可以达到几百万的TPS，而使用RocketMQ组件的核心业务集群，集群TPS只能达到几十万TPS，这样的现象激发了我对两者性能方面的思考。温馨提示：TPS只是众多性能指标中的一个，我们在做技术选型方面要从多方面考虑，本文并不打算就消息中间件选型方面投入太多笔墨，重点想尝试剖析两者在性能方面的设计思想。1、文件布局1.1 Ka
转载
2021-06-07 11:01:53
213阅读
2评论
在双十一过程中投入同样的硬件资源，Kafka搭建的日志集群单个Topic可以达到几百万的TPS，而使用RocketMQ组件的核心业务集群，集群TPS只能达到几十万TPS，这样的现象激发了我对两者性能方面的思考。温馨提示：TPS只是众多性能指标中的一个，我们在做技术选型方面要从多方面考虑，本文并不打算就消息中间件选型方面投入太多笔墨，重点想尝试剖析两者在性能方面的设计思想。1、文件布局1.1Kafk
转载
2021-06-06 11:42:29
236阅读
最全MQ消息队列有哪些？目前在业界有哪些比较知名的消息引擎呢？如下图所示这里面几乎完全列举了当下比较知名的消息引擎，包括： ZeroMQ 推特的Distributedlog ActiveMQ：Apache旗下的老牌消息引擎 RabbitMQ、Kafka：AMQP的默认实现。 RocketMQ Artemis：Apache的ActiveMQ
转载
2024-09-08 23:41:02
69阅读
系统一直使用的Kafka用来消费业务流水，最近在群里听到反馈说希望转到Rocketmq，支持更多的业务功能，因此去了解了一下，发现相比之下Kafka确实应用场景太少了，基本就是消费日志，相比之下Rockmq有很多优秀的特性，下面具体介绍一下。Kafka首先介绍一下Kafka，Kafka是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统，比较常用于日志收集系统，和消
转载
2024-03-21 10:18:14
34阅读
Broker差异主从差异: kafka的master/slave是基于partition维度的，而rocketmq是基于broker维度的；kafka的master/slave是可以切换的，而rocketmq不行，当rocketmq的master宕机时，读能被路由到slave上，但写会被路由到此topic的其他broker上。刷盘： rocketmq支持同步刷盘，也就是每次消息都等刷入磁盘后再返回
转载
2024-05-17 14:50:41
99阅读
rocketMq和kafka的性能对比和原理，Kafka vs RocketMQ Topic数量对单机性能的影响 阿里巴巴中间件团队对rocketMq，kafka和rabbitMq的发送消息性能的测试，在单机同步发送的场景下，Kafka>RocketMQ>RabbitMQ。
rocketMq和kafka的性能对比和原理，Kafka vs RocketMQ Topic数量对单机性能的影
转载
2021-08-19 18:06:42
1151阅读
Kafka为大数据而生的消息中间件，靠着百万级TPS的吞吐量在数据采集、传输、存储的过程中发挥着举足轻重的作用。优点性能卓越，单机写入TPS约在百万条/秒，最大的优点，就是吞吐量高。时效性ms级可用性非常高，kafka是分布式的，一个数据多个副本，少数机器宕机，不会丢失数据，不会导致不可用消费者采用Pull方式获取消息，消息有序，通过控制能够保证所有消息被消费且仅被消费一次有优秀的第三方Kafka
转载
2024-04-01 14:36:17
57阅读
RocketMQ专家丁威：Kafka和RocketMQ从性能角度对比丁威中生代技术在双十一过程中投入同样的硬件资源，Kafka搭建的日志集群单个Topic可以达到几百万的TPS，而使用RocketMQ组件的核心业务集群，集群TPS只能达到几十万TPS，这样的现象激发了我对两者性能方面的思考。温馨提示：TPS只是众多性能指标中的一个，我们在做技术选型方面要从多方面考虑，本文并不打算就消息中间件选型方
原创
2021-04-21 22:29:09
751阅读
目录一、选择消息队列产品的基本原则1、开源2、流行3、靠谱二、常见的消息队列产品1、RabbitMQ1.1 特点及优势1.2 可能存在的不足2、RocketMQ3. Kafka4. 其它消息队列三、小结作为程序员，你一定听过"没有银弹"。银弹这个词，是来源于欧洲中世纪的传说，就是狼人这种妖怪，一般的子弹打不死它，必须用银子做成的子弹才能杀死它。后来银弹这个词就被用来形容那些特效的、一用就灵的方法。
转载
2024-04-01 14:42:53
118阅读
方法论-评估和选择备选方案的方法按优先级选择，即架构师综合当前的业务发展情况、团队人员规模和技能、业务发展预测等因素，将质量属性按照优先级排序，首先挑选满足第一优先级的，如果方案都满足，那就再看第二优先级……以此类推。RocketMQ 和 Kafka 到底有什么区别？（1） 适用场景Kafka适合日志处理；RocketMQ适合业务处理。结论：平手，根据具体业务定夺。（2） 性能Kafka单机写入
转载
2024-02-26 17:23:02
36阅读
1、适用场景 kafka适合日志处理 rocketmq适合业务处理 结论：两者没有区别，根据具体业务定夺 2、性能 kafka单机写入TPS号称在百万条/秒 rocketmq大约在10万条/秒 结论：追求性能方面，kafka单机性能更高 3、可靠性 kafka使用异步刷盘方式，异步Replication rocketmq支持异步/同步刷盘，异步/同步Replication 结论：rocketmq所
转载
2024-03-19 11:14:11
838阅读
Kafka、RabbitMQ以及RocketMQ调研起初当我们准备引入消息队列的时候，一共发现业界内使用很多的有四种MQ，分别是ActiveMQ、Kafka、RabbitMQ、RocketMQ。由于ActiveMQ目前并不是很活跃了，就直接没去深入对比了，前几年这个MQ用的还是比较多的，我在2015年之前在金融机构的项目基本都是基于ActiveMQ来做的。所以，我们今天就对Kafka、Rabbit
转载
2024-03-26 09:41:41
41阅读
消息队里在开发中的地位是核心基础，如果想提高系统的处理瓶颈上线，MQ队列是首选的组件。目前主流的队列有三种：Kafka，RocketMQ,RabbitMQ。可能有人会有疑问，怎么没有ActiveMQ。因为经过多年的发展，目前ActiveMQ的社区非常不活跃，其开始逐渐势微，这里暂不介绍。在业务中如何对MQ进行选型？首先是立足于本职场景，不要为了使用而使用。而从技术维度来分析，个人认为主要包括：可用
转载
2024-04-16 22:18:42
60阅读
特性ActiveMQRabbitMQRocketMQkafka单机吞吐量万级，吞吐量比RocketMQ和Kafka要低了一个数量级万级，吞吐量比RocketMQ和Kafka要低了一个数量级10万级，RocketMQ也是可以支撑高吞吐的一种MQ10万级别，这是kafka最大的优点，就是吞吐量高。一般配合大数据类的系统来进行实时数据计算、日志采集等场景topic数量对吞吐量的影响topic可以达到几百
转载
2024-04-08 12:25:37
82阅读
