RocketMQ介绍与实现原理1、简介2、服务发现2.1 路由注册2.2 路由删除2.3 路由发现2.4 总结3、RocketMQ消息发送3.1 消息发送基本流程3.1.1 消息批量发送3.1.2 消息发送异常机制4、RocketMQ消息存储4.1 消息发送存储流程4.2 过期文件删除机制5、消息的消费5.1 消息拉取5.1.1 消息拉取基本流程5.1.1.1 消息拉取客户端消息拉取请求封装5.
转载
2024-06-24 08:32:48
29阅读
目录一、普通消息：1.消息发送分类：（1）同步发送消息：（2）异步发送消息：（3）单向发送消息：2.普通消息代码举例：定义生产者：（1）同步发消息生产者：Sync（2）异步消息发送生产者：Async（3）单向消息发送生产者：定义消费者：二、顺序消息：三、延迟消息：四、事务消息：五、批量消息：六、消息过滤：七、消息发送重试机制：八、消费重试机制：九、死信队列： 一、普通消息：1.消息发送分类：（1
转载
2023-11-20 07:06:40
25阅读
介绍功能 1、应用解耦 复杂的应用里会存在多个子系统，如果各个子系统之间的耦合性太高，整体系统的可用性就会大幅降低。比如一个电商系统，任何一个子系统出了故障或者因为升级等原因暂时不可用，都会造成下单操作异常，影响用户使用体验。 当转变成基于消息队列的方式后，系统可用性就高多了，比如物流系统因为发生故障，需要几分钟的时间来修复，在这几分钟的时间里，物流系统要处理的内容被缓存在消息队列里，用户的下单操
转载
2023-12-18 18:32:00
69阅读
一般执行比较耗时的代码操作时，都可以交给mq异步实现接口：比如使用mq异步发送优惠券、扣库存，异步发送短信、邮件，也可以异步收集系统日志从而和应用服务进行解耦等多种应用场景； 客户端发送请求到服务端，服务端相应的接口接收到请求后会开启线程进行处理，如果执行代码需要较长时间，接口响应比较慢，导致客户端一直处于阻塞状态；对于上面提到的比较耗时、不可控的业务逻辑处理接口，可以采用多线程或者mq
转载
2023-10-26 15:33:37
36阅读
RocketMQ应用一、测试环境工程准备二、消息响应1.消息发送的状态-SendStatus2.producer消息Id-msgId3.broker消息Id-offsetMsgId三、普通消息1.消息发送分类1.1 同步发送消息1.2 异步发送消息1.3 单向发送消息2.代码举例2.1 同步消息发送生产者2.2 异步消息发送生产者2.3 单向消息发送生产者2.4 消费者四、顺序消息1.什么是顺序
转载
2024-06-07 11:50:28
28阅读
一，前言Linux 系统中一切皆文件，仔细想一下 Linux 系统的很多活动无外乎读操作和写操作，零拷贝就是为了提高读写性能而出现的。视频观看地址：图文并茂|彻底搞懂零拷贝（Zero-Copy）技术二，数据拷贝基础过程在 Linux 系统内部缓存和内存容量都是有限的，更多的数据都是存储在磁盘中。对于 Web 服务器来说，经常需要从磁盘中读取数据到内存，然后再通过网卡传输给用户： 上述数据流转只是大
JAVA Soket、ServerSocket通信IP地址和端口号打开命令提示符输入 ：cmd，输入ipconfig后按下回车，找到ivp4地址。它就是你的IP地址。创建一个服务器非常简单，在构造方法里面输入一个端口号，这个端口号有一个范围0~65535： ServerSocket server=new ServerSocket(9090); 如果你看到这样的异常信息：java.net.Bin
转载
2023-09-20 10:30:39
68阅读
简而不简单!
原创
2020-05-14 19:44:45
825阅读
1. 消息队列的使用场景消息队列的使用场景有很多，最核心的有三个：解耦、异步、削峰解耦：一个系统或者一个模块，调用了多个系统或者模块，相互之间的调用很复杂，维护起来很麻烦。此时可以考虑使用消息队列来实现多个系统之间的解耦异步：系统A接受一个请求，需要在自己本地写库，还需要在系统BCD三个系统写库，同步操作比较费时。削峰：高峰时段系统接收到的请求缓存到消息队列，供系统根据负载慢慢消化2. 消息队列的
转载
2024-03-31 18:50:48
91阅读
正文简介RocketMQ是一个纯Java、分布式、队列模型的开源消息中间件，前身是MetaQ，是阿里参考Kafka特点研发的一个队列模型的消息中间件，后开源给apache基金会成为了apache的顶级开源项目，具有高性能、高可靠、高实时、分布式特点。功能发布/订阅消息传递模型 财务级交易消息 各种跨语言客户端，例如Java，C / C ++，Python，Go 可插拔的传输协议，例如TCP，SSL
转载
2024-01-04 06:45:24
108阅读
一. 分布式事务前言1. 数据库管理系统中事务(transaction)的四个特性：简称ACID（这种特性简称刚性事物）原子性（Atomicity）：原子性是指事务是一个不可再分割的工作单元，事务中的操作要么都发生，要么都不发生。一致性（Consistency）：一致性是指在事务开始之前和事务结束以后，数据库的完整性约束没有被破坏；这是说数据库事务不能破坏关系数据的完整性以及业务逻辑上的
转载
2024-10-11 10:47:09
29阅读
本文目录RocketMQ集群服务集群服务**方案1：多master模式**方案2：多“master-slave”异步复制模式方案3：多“master-slave”同步复制模式（同步双写）方案4：DLedger(多副本)模式（唯一的推荐使用方案）”多主多从异步复制“集群模式部署规划1.搭建nameserver集群2.搭建broker集群搭建1）【node1】搭建master-a2）【node2】搭
研究 RocketMQ 的同学都知道，RocketMQ 的生态目前并不是很完善，包括官方的文档资料也有限，官方的 Console 存在一些 Bug，页面的样式有的也有问题，但是正是由于这些原因，我们针对 RocketMQ 能做的事有很多，不像 Kafka，生态已经很完善，一些企业也对 Kafka 做了开源的产品，最近开始做基于 K8S 的 RocketMQ 管理控制台，需要对每个集群有完善的监控告警，接下来就简单说明一下做 RocketMQ 的监控有哪些步骤。
原创
2022-07-22 15:20:17
549阅读
文章目录1.应用场景1.1.RocketMQ应用场景1.2.Kafka应用场景2.架构组成2.1.RocketMQ架构组成2.2.Kafka架构组成 1.应用场景1.1.RocketMQ应用场景RocketMQ 是阿里巴巴开源的分布式消息中间件，前身为阿里内部消息系统Notify及MetaQ。RocketMQ被广泛应用于电商、订单、金融等分布式应用领域，其主要特点和应用场景如下： RocketM
转载
2024-04-04 19:18:20
109阅读
本文主要在什么是微消息队列 MQTT？的基础上介绍微消息队列 MQTT 和传统消息中间件的关联和区别，并针对实际应用场景下的产品选型给出建议。背景信息传统的消息中间件，例如消息队列 RocketMQ、消息队列 Kafka 等都是面向微服务大数据等领域，负责消息的存储和转发，消息的生产者和消费者都是服务端应用。这种设计很适合服务端技术栈固定、语言平台固定的场景。而移动互联网和 IoT 领域则
转载
2019-09-08 20:16:00
337阅读
2评论
在未出现消息队列的时候，这些服务的调用是同步的过程，当出现了消息队列之后会发现已经变成了异步的过程。异步的过程在于提高整个系统的吞吐量。只要消息发送到队列，那么就得到应该Ok的指示。对于上游来说就可以很快的结束业务。对于下游来说，既然已经在消息队列里面了，那么下游可能就不那么追求实时性。不是要立刻执行完才算
原创
2024-09-14 15:43:46
97阅读
参考官方安装文档：https://rocketmq.apache.org/docs/quick-start/本次安装环境为Ubuntu 20。准备工作：正式安装：解压建立软连接启动name server修改配置文件runserver.sh中的jvm参数，生产环境无需修改，测试环境可能因内存不足无法启动。由原来的修改为启动：启动broker修改配置文件runbroker.sh中的jvm参数，生产环境无需修改，测试环境可能因内存不足无法启动。由原来的改为启动生产和消费
原创
2022-07-04 20:00:00
337阅读
Metaq1.x是RocketMQ前身的第一个版本，本质上把Kafka做了一次java版本的重写（Kafka是scala语言开发）。Meta2.x，主要是对存储部分进行了优化，因为kafka的数据存储，它的partition是一个全量的复制，在阿里、在淘宝的这种海量交易。Kafka这种机制的横向拓展是非常不好的。2012年阿里同时把Meta2.0从阿里内部开源出来，取名RocketMQ，同时为了命名上的规范（版本上延续），所以这个就是RocketMQ3.0。现在RocketMQ主要维护的是4.x的版本，也是
原创
2022-07-05 08:00:00
255阅读
RocketMQ 结构概述Apache RocketMQ是一个分布式消息传递和流平台，具有低延迟，高性能和可靠性，万亿级容量和灵活的可扩展性。它由四部分组成：NameServer、broker、producer 和 consumer。它们中的每一个都可以水平扩展而没有单点故障。 如上图所示。NameServer集群NameServer提供轻量级服务发现和路由。每个NameServer记录完整的路由
转载
2023-07-29 16:00:43
117阅读
RocketMQ高级:RocketMQ集群,RocketMQ控制台,RocketMQ高级特性:主从数据复制，负载均衡，消息重试，死信队列，消息重复消费与消息幂等
原创
2022-01-04 10:59:11
1772阅读
