最近开始总结消息队列的一些特点，公司中现在用到的消息队列是kafka,于是顺带结合下其他几个消息队列来比较一下1、Kafka、ActiveMQ、RabbitMQ、RocketMQ 有什么优缺点？特性ActiveMQRabbitMQRocketMQKafka单机吞吐量万级，比 RocketMQ、Kafka 低一个数量级同 ActiveMQ10 万级，支撑高吞吐10 万级，高吞吐，一般配合大数据类的系
转载
2024-04-23 15:10:58
117阅读
进程间通信的方式有很多，常见的有信号，信号量，消息队列，管道，共享内存，和socket等，这里我们主要讨论管道，共享内存，和socket，其他的比较简单只做简单的介绍。信号：信号主要用于通知某个进程发生了什么事，就像你打电话通知某个人某件事一样，事先注册号信号相应的注册函数就可以了。信号量：信号量实际上是一个计数器，通常在多线程或者多进程开发中会用到，主要用来控制多线程多进程对于共享资源访问，通常
转载
2024-05-20 20:47:45
97阅读
1 什么是消息队列保存消息的容器。消息队列独特的机制和结构保证了消息发送者和接收者之间良好的异步通信。2 为什么用消息队列 传统的进程间通信（也可为模块间通信）较为单一。消息生产者发送消息等待消息消费者接收消息，在此同步通信过程中会出现数据丢失、生产者长时间等待以及两者之间高耦合等问题。消息队列在保证消息生产者和消费者之间的正常通信的同时，也解决了传统消息通信的弊端。其优势表现如下： （1）异
Java Spring Cloud XVII 之 消息队列1. 软件下载doc.canglaoshi.org2. Dubbo远程调用的性能问题Dubbo调用在微服务项目中普遍存在这些Dubbo调用都是同步的"同步"指:A(消费者)调用B(生产者)的服务A在发起调用后,在B返回之前只能等待直到B返回结果后A才能运行 Dubbo消费者发送调用后进入阻塞状态,这个状态表示改线程仍占用内存资源,但是什么动
1.背景介绍1. 背景介绍消息队列是一种异步通信机制，它允许应用程序在不同时间和不同系统之间传递消息。在微服务架构中，消息队列是一种重要的组件，它可以解耦服务之间的通信，提高系统的可扩展性和可靠性。Spring Boot 是一个用于构建微服务的框架，它提供了许多有用的功能，包括与消息队列的集成。在这一章中，我们将深入探讨 Spring Boot 的消息队列支持，揭示其优势和如何使用。2. 核心概念
RocketMQ是阿里巴巴旗下一款开源的MQ框架，经历过双十一考研、Java编程语言实现，有非常好完整生态系统。目前主流的MQ主要是Rocketmq、kafka、Rabbitmq，Rocketmq相比于Rabbitmq、kafka具有主要优势特性有：支持事务消息(能够解决分布式事务的问题)支持顺序消息(底层已经使用内存队列实现)支持consumer端tag过滤，减少不必要的网络传输Rocketmq
转载
2024-07-04 04:26:22
377阅读
背景今天在脉脉上面看到了一个帖子，比较有意思： 这个帖子的意思是：在使用Kafka的时候，我们已经设置了多个分区，如何去提升消费能力？如果使用线程池的方式去提升如何保证重启时消息不丢。这个题其实问了两个点，第一个是如何提升消费能力，第二个是如果选择线程池，我们如何做到消息不丢。这里先解释一下这两个问题到底是怎么回事，在很多消息队列中都有一个概念叫partion，代表着分区，分区是我们提
1.消息队列控制块的组成（结构体） 通过下图可以很容易发现消息队列有8个元素.msg_pool、.msg_size、max_msgs、.entry、.msg_queue_head、.msg_queue_tail、.msg_queue_free和.parent，其中.msg_pool为消息队列的起始地址；.msg_size为每条消息的大小；.max_msgs为消息队列的条目数；.entry队列内的消
转载
2024-04-07 13:57:14
76阅读
1、引言对于即时通讯网来说，所有的技术文章和资料都在围绕即时通讯这个技术方向进行整理和分享，这一次也不例外。对于即时通讯系统（包括IM、消息推送系统等）来说，MQ消息中件间是非常常见的基础软件，但市面上种类众多、各有所长的MQ消息中件间产品，该怎么去选择？这是个问题！对于很多经验不足的开发者来说，一个公司内部用的IM聊天系统，总用户量也不过百十来人，动辄就是Kafka、MongoDB，美其名曰为了
RabbitMQ RabbitMQ是使用Erlang编写的一个开源的消息队列，本身支持很多的协议：AMQP，XMPP, SMTP, STOMP，也正因如此，它非常重量级，更适合于企业级的开发。同时实现了Broker构架，这意味着消息在发送给客户端时先在中心队列排队。对路由，负载均衡或者数据持久化都有很好的支持。Redis Redis是一个基于Key-Value对的NoSQL数据库，开发维护很活跃。
spring的ApplicationEvent事件通知机制原理与应用spring框架抽象出了一套事件机制，通过发布，订阅方式来实现，类似观察者模式。先来搭建一个基本的spring环境，然后做个简单的案例演示事件的应用，最后在做源码分析。1.环境搭建引入依赖<dependency>
<groupId>org.springframework</groupId>
Spring是个非常非常非常优秀的java框架，主要是用它的IOC容器帮我们依赖注入和管理一些程序中的Bean组件，实现低耦合关联，最终提高系统可扩展性和可维护性，用它来辅助我们构建web工程将会感觉非常非常非常地愉悦。 Spring旗下的Spring MVC又是后来居上，设计得非常非常非常的优雅，可以用来替代Struts来做界面视图的控制(Controller)等。 现在我们就
转载
2024-10-10 12:20:55
50阅读
阻塞队列（BlockingQueue）是一个支持两个附加操作的队列。这两个附加的操作是：在队列为空时，获取元素的线程会等待队列变为非空。当队列满时，存储元素的线程会等待队列可用。阻塞队列常用于生产者和消费者的场景，生产者是往队列里添加元素的线程，消费者是从队列里拿元素的线程。阻塞队列就是生产者存放元素的容器，而消费者也只从容器里拿元素。先放张图:根据前面的描述, 我们来考虑下阻塞队列在程序中会出现
我们在采用消息中间件（MQ）时通常是因为需要“解耦、异步、削峰”的业务架构或技术架构需求，目前开源的消息中间件有很多，比较主流的有RabbitMQ(Erlang实现AMQP协议)、Kafka(Scala，Java)、ActiveMQ(Java-JMS)、RocketMQ(Java-HTTP、MQTT)、ZeroMQ(C++,以库的形式存在，协议层是TCP、UDP)等，虽然都是消息中
需求最近接到公司的这么一个需求，在不使用消息中间件的情况下，开发一个消息发送的框架来异步处理各种服务，以提高系统的吞吐量，具体有以下几点要求:
1.支持数据的可持久化，公司最看重这个
2.服务高可用，公司使用了ngnix做负载均衡，有2台服务器
3.服务队列支持暂停和恢复
4.不侵入其他业务逻辑，也就是要做到低耦合。接到这个任务后，回去琢磨了一下，觉得应该先设计UML图和数据库。 初次使用EA软件
转载
2024-03-02 09:04:27
36阅读
RabbitMQ 简述MQ全称为Message Queue, 消息队列（MQ）是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息（针对应用程序的数据）来通信，而无需专用连接来链接它们。消息传递指的是程序之间通过在消息中发送数据进行通信，而不是通过直接调用彼此来通信，直接调用通常是用于诸如远程过程调用的技术。排队指的是应用程序通过 队列来通信。队列的使用除去了接收和发送应用
消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ等。官方首页：
转载
2024-03-26 11:40:53
36阅读
EDA: Event-Driven Architecture事件驱动架构2009-09-24 17:28 SOA的核心是：暴露然后处理 expose and handle，SOA使事件Event跨系统流动EDA是以事件为核心：什么时候触发 然后做什么。EDA是更加松散耦合，有极强的巨大事务处理能力ESP—Event Stream Processing：监视事件数据流，分析这些
集成rabbitmq前言消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题实现高性能，高可用，可伸缩和最终一致性架构。RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息，具有较高的系统吞吐量、可靠性、消息持久化、免费等优点，在软件项目中具有非常广泛的应用。项目介绍本项目以springboot集成rabbitmq,引导如何设计和优雅地集成rabbitmq相
转载
2024-03-25 16:20:48
72阅读
在做项目过程中，一些耗时长的任务可能需要在后台线程池中运行；典型的如发送邮件等，由于需要调用外部的接口来进行实际的发送操作，如果客户端在提交发送请求后一直等待服务器端发送成功后再返回，就会长时间的占用服务器的一个连接；当这类请求过多时，服务器连接数会不够用，新的连接请求可能无法得到满足，从而导致客户端连接失败。因此这类服务一般需要使用到后台线程池来处理。 在这
转载
2024-06-27 20:14:59
127阅读
