程序员的成长之路
互联网/程序员/技术/资料共享
阅读本文大概需要 7 分钟
作者:会跳舞的机器人
一、简要介绍
-
开源AMQP实现,Erlang语言编写,支持多种客户端
-
分布式、高可用、持久化、可靠、安全
-
支持多种协议:AMQP、STOMP、MQTT、HTTP
-
适用于多系统之间的业务解耦的消息中间件
二、基本概念
1、exchange:交换器,负责接收消息,转发消息至绑定的队列,有四种类型:
-
direct:完全匹配的路由
-
topic:模式匹配的路由
-
fanout:广播模式
-
headers:键值对匹配路由
Exchange属性:
-
持久化:如果启用,那么rabbit服务重启之后仍然存在
-
自动删除:如果启用,那么交换器将会在其绑定的队列都被删除掉之后自动删除掉自身
2、Queue:队列,rabbitmq的内部对象,用于存储消息,其属性类似于Exchange,同样可以设置是否持久化、自动删除等。
消费者从Queue中获取消息并消费。多个消费者可以订阅同一个Queue,这时Queue中的消息会被平均分摊给多个消费者进行处理,而不是每个消费者都收到所有的消息并处理。
3、Binding:绑定,根据路由规则绑定交换器与队列
4、Routing:路由键,路由的关键字
三、消息的可靠性
-
Message acknowledgment:消息确认,在消息确认机制下,收到回执才会删除消息,未收到回执而断开了连接,消息会转发给其他消费者,如果忘记回执,会导致消息堆积,消费者重启后会重复消费这些消息并重复执行业务逻辑。
-
Message durability:消息持久化,设置消息持久化可以避免绝大部分消息丢失,比如rabbitmq服务重启,但是采用非持久化可以提升队列的处理效率。如果要确保消息的持久化,那么消息对应的Exchange和Queue同样要设置为持久化。
-
Prefetch count,每次发送给消费者消息的数量,默认为1
另外,如果需要可靠性业务,需要设置持久化和ack机制,如果系统高吞吐,可以设置为非持久化、noack、自动删除机制。
四、简单应用
模拟这样一个业务场景,用户下单成功后,需要给用户增加积分,同时还需要给用户发送下单成功的消息,这是在电商业务中很常见的一个业务场景。
如果系统是微服务架构,可能用户下单功能在订单服务,给用户增加积分的功能在积分服务,给用户发送通知消息的功能在通知服务,各个服务之间解耦,互不影响。那么要实现上述的业务场景,消息中间件rabbitmq是一个很好的选择。
原因如下:
-
高性能,它的实现语言是天生具备高并发高可用的erlang 语言
-
支持消息的持久化,即使服务器挂了,也不会丢失消息
-
消息应答(ack)机制,消费者消费完消息后发送一个消息应答,rabbitmq才会删除消息,确保消息的可靠性
-
支持高可用集群
-
灵活的路由
实现思路:
用户下单成功后,rabbitmq发送一条消息至EXCHANGE.ORDER_CREATE交换器,该交换器绑定了两个队列,QUEUE.ORDER_INCREASESCORE、QUEUE.ORDER_NOTIFY,消费者订阅这两个队列分别用来处理增加积分、发送用户通知。
如果后续日志系统还需要记录下单的相关日志,那么我们只需要再定义一个队列并将其绑定到EXCHANGE.ORDER_CREATE即可。
下单发rabbitmq消息
package com.robot.rabbitmq; import com.rabbitmq.client.AMQP; import com.rabbitmq.client.Channel; import com.rabbitmq.client.Connection; import com.rabbitmq.client.ConnectionFactory; import java.io.IOException; import java.util.UUID; import java.util.concurrent.TimeoutException; /** * @author: 会跳舞的机器人 * @date: 2017/10/13 10:46 * @description: 模拟用户下单之后发送rabbitmq消息 */ public class OrderCreator { // 交换器名称 private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE"; // 消息内容 private static String msg = "create order success"; /** * 模拟创建订单后发送mq消息 */ public void createOrder() { System.out.println("下单成功,开始发送rabbitmq消息"); ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("192.168.12.44"); connectionFactory.setPort(56720); connectionFactory.setUsername("baibei"); connectionFactory.setPassword("baibei"); Connection connection; Channel channel; try { connection = connectionFactory.newConnection(); channel = connection.createChannel(); // 持久化 boolean durable = true; // topic类型 String type = "topic"; // 声明交换器,如果交换器不存在则创建之 channel.exchangeDeclare(EXCHANGE, type, durable); String messgeId = UUID.randomUUID().toString(); // deliveryMode>=2表示设置消息持久化 AMQP.BasicProperties props = new AMQP.BasicProperties.Builder().deliveryMode(2).messageId(messgeId).build(); // 发布消息 String routingKey = "order_create"; channel.basicPublish(EXCHANGE, routingKey, props, msg.getBytes("utf-8")); connection.close(); } catch (IOException e) { e.printStackTrace(); } catch (TimeoutException e) { e.printStackTrace(); } } }
积分系统订阅消息
package com.robot.rabbitmq; import com.rabbitmq.client.AMQP; import com.rabbitmq.client.Channel; import com.rabbitmq.client.Connection; import com.rabbitmq.client.ConnectionFactory; import com.rabbitmq.client.Consumer; import com.rabbitmq.client.Envelope; import com.rabbitmq.client.ShutdownSignalException; import java.io.IOException; import java.util.concurrent.TimeoutException; /** * @author: 会跳舞的机器人 * @date: 2017/10/13 16:02 * @description: rabbitmq消费者,模拟下单成功后给用户增加积分 */ public class IncreaseScoreConsumer implements Consumer { private Connection connection; private Channel channel; // 交换器名称 private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE"; // 增加积分队列名称 private static final String QUEUENAME = "QUEUE.ORDER_INCREASESCORE"; public void consume() { // 初始化rabbitmq连接信息 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("192.168.12.44"); connectionFactory.setPort(56720); connectionFactory.setUsername("baibei"); connectionFactory.setPassword("baibei"); try { connection = connectionFactory.newConnection(); channel = connection.createChannel(); // 声明交换器 channel.exchangeDeclare(EXCHANGE, "topic", true); // 声明队列 channel.queueDeclare(QUEUENAME, true, false, false, null); // 交换器与队列绑定并设置routingKey channel.queueBind(QUEUENAME, EXCHANGE, "order_create"); // 消费消息,callback是该类,关闭自动确认消息,在完成业务逻辑后手动确认确认 channel.basicConsume(QUEUENAME, false, this); } catch (IOException e) { e.printStackTrace(); } catch (TimeoutException e) { e.printStackTrace(); } } public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { String msg = new String(body, "UTF-8"); System.out.println("《积分系统》收到订单消息:" + msg + ",给用户增加积分......"); // 手动确认消息 channel.basicAck(envelope.getDeliveryTag(), false); /** * channel.basicReject(envelope.getDeliveryTag(), false);该方法会丢弃掉队列中的这条消息 * channel.basicReject(envelope.getDeliveryTag(), true);该方法会把消息重新放回队列 * 一般系统会设定一个重试次数,如果超过重试次数,则会丢弃消息,反之则会把消息再放入队列 */ } public void handleConsumeOk(String consumerTag) { } public void handleCancelOk(String consumerTag) { } public void handleCancel(String consumerTag) throws IOException { } public void handleShutdownSignal(String consumerTag, ShutdownSignalException sig) { } public void handleRecoverOk(String consumerTag) { } }
通知系统订阅消息
package com.robot.rabbitmq; import com.rabbitmq.client.AMQP; import com.rabbitmq.client.Channel; import com.rabbitmq.client.Connection; import com.rabbitmq.client.ConnectionFactory; import com.rabbitmq.client.Consumer; import com.rabbitmq.client.Envelope; import com.rabbitmq.client.ShutdownSignalException; import java.io.IOException; import java.util.concurrent.TimeoutException; /** * @author: 会跳舞的机器人 * @date: 2017/10/13 16:20 * @description: rabbitmq消费者,模拟下单成功后给用户发送通知 */ public class NotifyConsumer implements Consumer { private Connection connection; private Channel channel; // 交换器名称 private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE"; // 通知用户下单成功通知队列名称 private static final String QUEUENAME = "QUEUE.ORDER_NOTIFY"; public void consume() { // 初始化rabbitmq连接信息 ConnectionFactory connectionFactory = new ConnectionFactory(); connectionFactory.setHost("192.168.12.44"); connectionFactory.setPort(56720); connectionFactory.setUsername("baibei"); connectionFactory.setPassword("baibei"); try { connection = connectionFactory.newConnection(); channel = connection.createChannel(); // 声明交换器 channel.exchangeDeclare(EXCHANGE, "topic", true); // 声明队列 channel.queueDeclare(QUEUENAME, true, false, false, null); // 交换器与队列绑定并设置routingKey channel.queueBind(QUEUENAME, EXCHANGE, "order_create"); // 消费消息,callback是该类,关闭自动确认消息,在完成业务逻辑后手动确认确认 channel.basicConsume(QUEUENAME, false, this); } catch (IOException e) { e.printStackTrace(); } catch (TimeoutException e) { e.printStackTrace(); } } public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException { String msg = new String(body, "UTF-8"); System.out.println("《通知系统》收到订单消息:" + msg + ",开始给用户发送通知......"); // 手动确认消息 channel.basicAck(envelope.getDeliveryTag(), false); /** * channel.basicReject(envelope.getDeliveryTag(), false);该方法会丢弃掉队列中的这条消息 * channel.basicReject(envelope.getDeliveryTag(), true);该方法会把消息重新放回队列 * 一般系统会设定一个重试次数,如果超过重试次数,则会丢弃消息,反之则会把消息再放入队列 */ } public void handleConsumeOk(String consumerTag) { } public void handleCancelOk(String consumerTag) { } public void handleCancel(String consumerTag) throws IOException { } public void handleShutdownSignal(String consumerTag, ShutdownSignalException sig) { } public void handleRecoverOk(String consumerTag) { } }
测试
package com.robot.rabbitmq; /** * @author: 会跳舞的机器人 * @date: 2017/10/13 16:27 * @description: */ public class Test { public static void main(String[] args) { IncreaseScoreConsumer increaseScoreConsumer = new IncreaseScoreConsumer(); increaseScoreConsumer.consume(); NotifyConsumer notifyConsumer = new NotifyConsumer(); notifyConsumer.consume(); OrderCreator orderCreator = new OrderCreator(); for (int i = 0; i < 3; i++) { orderCreator.createOrder(); } } }
输出:
下单成功,开始发送rabbitmq消息 《积分系统》收到订单消息:create order success,给用户增加积分...... 《通知系统》收到订单消息:create order success,开始给用户发送通知...... 下单成功,开始发送rabbitmq消息 《积分系统》收到订单消息:create order success,给用户增加积分...... 《通知系统》收到订单消息:create order success,开始给用户发送通知...... 下单成功,开始发送rabbitmq消息 《积分系统》收到订单消息:create order success,给用户增加积分...... 《通知系统》收到订单消息:create order success,开始给用户发送通知......
<END>