一、消息的生产1. 消息的生产过程Producer可以将消息写入到某Broker的某Queue中，其经历了如下过程：Producer发送消息之前，会先向NameServer发出获取消息Topic的路由信息的请求NameServer返回该Topic的路由表及Broker列表
Producer根据代码中指定的Queue选择策略，从Queue列表中选出一个队列，用于后续存储消息Producer对消息做一
转载
2024-10-17 10:13:15
36阅读
Producer，Consumer，Broker，NameSrv。他们之间的关系如下： 先简单了解一下各个模块的功能，下面会有章节详细介绍各个模块的功能。Producer和Consumer很好理解，顾名思义就是生产者和消费者，生产者负责生产消息，消费者负责消费消息，这2块的逻辑都是由业务使用者定义的。Broker是RocketMQ的核心，Broker实现了消息的存储、拉取等功能。Bro
转载
2024-01-18 20:46:43
78阅读
为什么要使用RabbitMQ？1.解耦系统A在代码中直接调用系统B和系统C的代码，如果将来D系统接入，系统A还需要修改代码，过于麻烦。2.异步将消息写入消息队列，非必要的业务逻辑以异步的方式运行，加快响应速度。3.削峰并发量大的时候，所有的请求直接怼到数据库，造成数据库连接异常。 RabbitMQ原理和架构RabbitMQ的技术架构如下图所示：1.生产者（Publisher）发消息到Ra
转载
2023-07-10 13:31:33
283阅读
简介RabbitMQ是一个开源的消息代理和队列服务器，用来通过普通协议在不同的应用之间共享数据(跨平台跨语言)。RabbitMQ是使用Erlang语言编写，并且基于AMQP协议实现。消息总线(Message Queue)，是一种跨进程、异步的通信机制，用于上下游传递消息。由消息系统来确保消息的可靠传递。作用 1.异步处理场景说明： 用户注册后，需要发注册邮件和注册短信。&
转载
2023-07-10 13:36:37
519阅读
首先来一张网上的rocketMq架构图，让大家直观感受下：下面我们就这张架构图上的几个主要角色进行介绍： namesrv集群：namesrv顾名思义，提供的是名字服务，也就是根据某个名字可以查询到对应的路由信息，在rocketMq中，路由信息是broker注册到namesrv上的，并且最终是给producer和consumer用的
转载
2024-06-10 01:38:38
34阅读
RocketMQ详解(12)——RocketMQ的重试机制一. MQ的重试机制由于MQ经常处于复杂的分布式系统中，考虑网络波动、服务宕机、程序异常因素，很有可能出现消息发送或者消费失败的问题。因此，消息的重试就是所有MQ中间件必须考虑到的一个关键点。如果没有消息重试，就可能产生消息丢失的问题，可能对系统产生很大的影响。所以，秉承宁可多发消息，也不可丢失消息的原则，大部分MQ都对消息重试提供了很好的
一、消息中间件功能1.应用解藕：应用之间不在相互依赖。2.流量削峰：流量达到高峰的时候，通常使用限流算法来控制流量涌入系统，避免系统被击瘫，但是这种方式损失了一部分请求。 此时可以使用消息中间件来缓冲大量的请求，匀速消费，当消息队列中堆积消息过多时，我们可以动态上线增加消费端，来保证不丢失重要请求。3.大数据处理消息中间件可以把各个模块中产生的管理员操作日志、用户行为、系统状态等数据文件作为消息收
转载
2024-06-05 12:39:21
31阅读
1.什么是消息中间件?消息是指应用间传输的数据。消息体包括文本字符串、Json、内嵌对象等。消息中间件是基于队列模型实现异步和同步传输数据的。作用：解耦，冗余（存储）、扩展性、削峰、可恢复性、顺序保证、缓冲、异步通信。通俗点来说就是支持支撑高并发、异步解耦、流量削峰、降低耦合度。2. AMQP是什么?AMQP（Advanced Message Queuing Protocol，高级消息队列协议）是
转载
2024-06-06 13:39:19
62阅读
AMQPRabbitMQ 就是 AMQP 协议的 Erlang 的实现(当然 RabbitMQ 还支持 STOMP2、 MQTT3 等协议 ) AMQP 的模型架构和 RabbitMQ 的模型架构是一样的，生产者将消息发送给交换器，交换器和队列绑定。RabbitMQ中的交换器、交换器类型、队列、绑定、路由键等都是遵循的 AMQP 协议中相应的概念。AMQP 协议的三层 ： Module Layer
转载
2023-08-31 12:58:18
448阅读
目录一：K8s架构及流向二：k8s组件2.1master组件2.1.1kube-apiserver2.1.2kube-controller-manager (控制器管理中心-定义资源类型)2.1.3kube-scheduler2.1.4etcd存储中心2.1.5AUTH :认证模块2.1.6cloud-controller-manager2.2node组件2.2.1kubelet2.2
目录基础架构NameServerBrokerProducerConsumerMessageQueueFilter服务过程重要特性高可用保障高性能保证负载均衡消费重试事务性消息基础架构 Apache RocketMQ 是一个分布式消息和流媒体平台，它由四个部分组成：名称服务器、代理、生产者和消费者。它们中的
转载
2024-04-18 05:45:48
20阅读
首先来看看一线大厂的 架构图一线大厂的 架构图 如上图所示，中间是我们的 MQ 集群架构， 在上层利用 keepalived 和 HA-Proxy， 最下面是 两个大的 MQ 集群 做一个高可用。当然了，在实际大厂里面 可能就不止 两个集群了，可以是很多个集群，然后集群之间利用 federration 插件进行数据同步 。 &n
转载
2024-05-20 21:41:13
156阅读
MQ 是message queue ,消息队列，也叫消息中间件，是一种应用程序对应用程序的通信方法，是分布式系统的重要主件。主要用于解决应用解耦、异步消息、流量削锋等问题，实现高可用、可伸缩和最终一致性的架构。目前使用较多的有ActiveMQ、RabbitMQ、Kafka、RocketMQ、ZeroMQ。实现原理：应用程序通过对数据（消息）的写和检索出入列队的方式，来实现应用程序与应用程序之间的通
转载
2024-02-03 14:24:58
79阅读
中间件是分布计算机系统中集成各个组成的软件粘接剂。
也有人把中间件定义为网络环境中一组为许多应用需要的、可复用和可扩充的服务或（资源相关的）功能。
数据库中间件
通常，它们可能不是一个实际的软件产品，而是一组标准或技术，帮助EAI应用软件去存取不同类型或地点的数据库系统，许多数据库厂商也提供了一些数据库产品特定的中间件，它能提供更高效的存取，但除非
MQ全称为Message Queue, 消息队列（MQ）是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息（针对应用程序的数据）来通信，而无需专用连接来链接它们。消息传递指的是程序之间通过在消息中发送数据进行通信，而不是通过直接调用彼此来通信，直接调用通常是用于诸如远程过程调用的技术。排队指的是应用程序通过 队列来通信。队列的使用除去了接收和发送应用程序同时执行的要求。&
转载
2024-10-21 11:13:07
39阅读
MMM简介：MMM（Master-Master replication manager for Mysql，Mysql 主主复制管理器）是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发，主要用来监控和管理Mysql Master-Master（双主）复制，虽然叫做双主复制，但是业务上同一时刻只允许对一个主进行写入，另一台备选主上提供部分读服务，以加速在主主切换时备选主的预
一、概述RocketMQ作为一个apache的顶级项目，拥有将近16K的star，它稳定的系统及强悍的性能，无疑在国内已经成为了企业消息队列的首选。接下来的一段时间，鄙人准备出一系列文章，从源码出发，逐一剖析RocketMQ的架构设计原理本文将仅做概念上的陈述github地址二、概念及模型本文中部分概念描述搬运自github官网RocketMQ主要由 Producer、Broker、Consume
转载
2023-12-17 21:01:10
99阅读
目录1、RocketMQ 简介2、RocketMQ 架构图3、RocketMQ 名词解释4、 RocketMQ Topic和Queue5. RocketMQ 入门实例5.1. RocketMQ 生产者5.2. RocketMQ 消费者 1、RocketMQ 简介RocketMQ 前身叫做 MetaQ, 在 MetaQ 发布 3.0 版本的时候改名为 RocketMQ，其本质上的设计思路和 Kaf
转载
2023-11-24 21:50:19
82阅读
序、RocketMQ简介 最近一直在做消息通知方面的项目，其中用的是阿里公司的RocketMq(简称RMQ)作为消息服务，RMQ是阿里开发的一个很不错的消息开源组件，支持亿级消息堆积能力，它也为淘宝天猫双十一提供了稳定的消息传递平台，现在在阿里云也推出了ONS服务，也是基于RMQ组件，RMQ在应用范围还是很广的，今天先简单介绍一下如何搭建服务。 RMQ的结构分为四个部分：生产者、消费者、name
MQ总结消息队列（MessageQueue，简称MQ）：是在消息的传输过程中保存消息的容器。MQ框架非常之多，比较流行的有RabbitMq、ActiveMq、ZeroMq、kafka，以及阿里开源的RocketMQ。为啥要用MQ：1.解耦：传统模式：系统间耦合性太强，如图所示，系统A在代码中直接调用系统B和系统C的代码，如果将来D系统接入，系统A还需要修改代码，过于麻烦！中间件模式：将消息写入消息
转载
2023-07-07 10:21:09
932阅读
