消息队列中间件（简称消息中间件）是指利用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下提供应用解耦、弹性伸缩、冗余存储、流量削峰、异步通信、数据同步等等功能，其作为分布式系统架构中的一个重要组件，有着举足轻重的地位。目前开源的中间件有很多，例如RabbitMQ、ActiveMQ、Kafka、RocketMQ
转载
2024-07-15 16:30:17
44阅读
死信队列死信队列: DLX, Dead-Letter-Exchange利用DLX, 当消息在一个队列中变成死信(dead message)之后, 它能被重新publish到另一个Exchange, 这个Exchange就是DLXDLX也是一个正常的Exchange, 和一般的Exchange没有区别, 他能在任何的队列上被指定, 实际上就是设置某个队列的属性当这个队列中有死信时,RabbitMQ就
分布式消息队列可快速持久化。通过O(1)的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能高吞吐量。即使是非常普通的硬件Kafka也可以支持每秒数百万的消息完全的分布式系统。它的Broker、Producer、Consumer都原生地支持分布式，自动支持负载均衡基本概念Broker 一个实例或节点Topic
Topic是Kafka中同一类数据的集合，
转载
2024-03-19 17:21:50
48阅读
前言消息队列，通常有两种场景，一种是发布者订阅模式，一种是生产者消费者模式。发布者订阅模式，即发布者生产消息放入队列，多个监听的消费者都会收到同一份消息，也就是每个消费者收到的消息是一样的。生产者消费者模式，生产者生产消息放入队列，多个消费者同时监听队列，谁先抢到消息就会从队列中取走消息，最终每个消息只会有一个消费者拥有。在大数据时代，传统的生产者消费者队列模式中的Topic数目可能从少量的几个变
转载
2024-06-04 23:10:42
131阅读
刚接触activeMQ，在这里分析一下topic和queue的区别，在我这的理解，最基本的区别便是queue是队列，消息可以存在队列里面，只要观察者去接收，这个消息就被接收到了，就消失了，就像生产啤酒，生产了很多，看你什么时候运走，然后topic就相当是广播功能，在某个时刻广播一条消息，不论多少观察者都能接收这条消息，但是如果没有一个观察者，消息就丢失了，所以queue是永远只给一个人。topic
转载
2024-03-29 13:45:45
40阅读
消息队列 MQ 既可为分布式应用系统提供异步解耦和削峰填谷的能力，同时也具备互联网应用所需的海量消息堆积、高吞吐、可靠重试等特性。核心概念Topic：消息主题，一级消息类型，生产者向其发送消息。生产者：也称为消息发布者，负责生产并发送消息至 Topic。消费者：也称为消息订阅者，负责从 Topic 接收并消费消息。消息：生产者向 Topic 发送并最终传送给消费者的数据和（可选）属性的组合。消息属
转载
2024-03-18 09:37:54
151阅读
总结自：队列（Queue）和主题（Topic）是JMS支持的两种消息传递模型：1、点对点（point-to-point，简称PTP）Queue消息传递模型：消息目的地的类型是队列，消息首先被传送至消息服务器端特定的队列中，然后从此对列中将消息传送至对此队列进行监听的某个消费者。同一个队列可以关联多个消息生产者和消息消费者，但一条消息仅能传递给一个消息消费者。如果多个消息消费者正在监听队列上的消息，
转载
2024-03-20 20:38:30
53阅读
消息队列什么是消息队列？消息队列，一般简称为MQ，消息(Message) + 队列(Queue) 的简写，而队列是一种先进先出的数据结构KakkaKafka是一个消息队列，把消息放到队列里面的叫生产者，从队列里面消费的叫消费者。一个消息中间件，队列不单单只有一个，我们往往会有多个队列，而我们生产者和消费者就得知道：把数据丢到哪个队列，从哪个队列得到消息，我们就需要给队列取名字，叫做topic，与队
转载
2024-04-11 12:46:06
194阅读
Topic主题，从逻辑上讲一个Topic就是一个Queue，即一个队列；从存储上讲，一个Topic存储了一类相同的消息，是一类消息的集合。比如一个名称为trade.order.queue的Topic里面存的都是订单相关的消息。Partition分区。分区是存在于服务端，内部保持顺序、且顺序不可变更的一个队列，用于存储消息。分区可能不应该出现在消息领域内，在使用消息中间件发送和消费时，实际上用户是感
转载
2023-07-10 13:48:05
114阅读
目前消息队列有很多种，如kafaka、rocketMq、rabbitMq，所有消息队列的模型都比较类似，基本都包括像队列（Queue）、主题（Topic）或是分区（Partition）等概念。本文详细介绍下消息队列中这些概念的具体含义，文章参考：极客时间-消息队列高手队列模型如上图是最早的消息模型，也是最直观的消息模型，我最先理解消息模型的时候，就是这么理解的，消费者发送消息到队列中，生产者从队列
转载
2024-04-26 21:17:12
35阅读
@为什么需要消息队列？解耦异步削峰@消息队列的通信模式？点对点（一个消息一个消费者）发布订阅（消息被发送给订阅的消费者）@术语Producer：消息的生产者Broker：kafka实例，每个kafka都有一个或多个实例Topic：消息的主题，每个broker有多个topicPartition：Topic的分区，每个topic有多个partition，分区的作用是负载，提高Kafka的吞吐量，同一个
转载
2024-04-12 16:08:36
42阅读
Kafka消息队列简介1 基本概念• Broker
Kafka集群包含一个或多个服务器，这种服务器被称为broker• Topic
每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic。（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）• Partition
Pa
转载
2024-04-22 16:46:13
21阅读
在之前的章节中我们改进了我们的日志系统，我们使用direct型交换器代替了只能盲目广播消息的fanout型交换器，这使得我们可以有选择性地接收日志。尽管使用direct型交换器改进了我们的日志系统，但它仍然有缺陷——它不能基于多个规则或标准进行路由。在我们的系统中，我呢也许希望订阅的不仅仅是严重级别的日志，而且基于日志发送方。你可能了解过systool这个unix工具，该工具不仅能路由严重级别的日
转载
2024-06-27 04:23:05
75阅读
消息队列 kafka 了解一下消息队列是什么MQ真正的目的是为了通讯,屏蔽在层复杂的通讯协议定义了一套应用层的、更加简单的通讯协议，MQ 所要做的就是在底层协议上构建一个简单的生产者消费者模型，然后提供一个 SDK 给我们可以定义自己的生产者和消费者实现消息通讯和无视底层通讯协议。什么是 Kafka号称全球100强的80%的企业都在用，包括制造业，银行，保险，通讯的大公司Apache Kafka是
转载
2024-03-28 10:00:30
58阅读
简述kafka的架构设计Consumer Group：消费者组，消费者组内每个消费者负责消费不同分区的数据，提高消费能力。逻辑上的订阅者。Topic：将消息分类，生产者和消费者面向的是同一个TopicPartition：为了实现扩展性，提升并发能力，一个Topic以多个Partition的方式分布到多个Broker上，每个Partition都是一个有序队列。一个Topic的每个Partition都
转载
2024-01-10 18:32:51
44阅读
Kafka 分布式消息对列Kafka 概述Kafka的整体结构Kafka 安装和使用Kafka python API创建生产者创建消费者Kafka-python Demo Kafka 概述Kafka 是一个分布式消息队列，用于构建实时数据管道和流处理。它具有横向扩展能力、容错能力，并且运行速度快，能够在上千台服务器上运行Kafka的整体结构
Producer ：消息生产者，就是向 kafka b
转载
2024-03-29 13:35:29
42阅读
Why do we need message queue?use for async processingservice decouplingstream control.异步处理：服务解耦：流量控制： 接下来 消息队列的两种模型 这个我们也是很熟悉了。 queue and pub-sub 队列模型每条消息只能被一个消费者消费，而发布/订阅模型就是为让一条消息可以被多个消费者消费而生的，当然队列模
转载
2024-05-07 08:38:57
68阅读
众所周知，目前的分布式系统中MQ已经成为了不可缺少的一部分，今天就来分析一下常见的消息队列以及他们的使用场景1. 什么是消息队列消息队列，一般我们会简称它为MQ（Message Queue）。消息队列是一种帮助开发人员解决系统间异步通信的中间件，常用于解决系统解耦和请求的削峰平谷的问题。 消息队列是分布式系统中重要的组件，使用消息队列主要是为了通过异步处理提高系统性能和削峰、降低系统耦合性。队列
转载
2024-04-03 12:49:38
199阅读
本文，我们来介绍RabbitMQ中的Topic类型的exchange。在正式开始之前，我们假设RabbitMQ服务已经启动，运行端口为5672，如果各位看官有更改过默认配置，那么就需要修改为对应端口，保持一致即可。准备工作：操作系统：window 7 x64 其他软件：eclipse mars，jdk7，maven 3-----------------------------------
转载
2024-06-25 08:17:07
75阅读
RocketMQ是一个队列模型的消息中间件，具有高性能高可靠高实时分布式采用java语言开发的分布式的消息系统，阿里巴巴团队开发，2016年底贡献给apache。模型队列模型主题模型或发布订阅模型在主题模型种，消息的生产者被成为发布者（Publisher），消息的消费者被称为订阅者（Subscriber）,存放消息的容易被称为主题（topic）。发布者将消息发布到指定的主题种，订阅者需要提前订阅主
转载
2024-03-19 10:49:28
29阅读
