RabbitMQ简介以及应用

字数 1052阅读 207

一、简要介绍

  • 开源AMQP实现,Erlang语言编写,支持多种客户端
  • 分布式、高可用、持久化、可靠、安全
  • 支持多种协议:AMQP、STOMP、MQTT、HTTP
  • 适用于多系统之间的业务解耦的消息中间件

二、基本概念

1、exchange:交换器,负责接收消息,转发消息至绑定的队列,有四种类型:

  • direct:完全匹配的路由
  • topic:模式匹配的路由
  • fanout:广播模式
  • headers:键值对匹配路由

Exchange属性:

  • 持久化:如果启用,那么rabbit服务重启之后仍然存在
  • 自动删除:如果启用,那么交换器将会在其绑定的队列都被删除掉之后自动删除掉自身

2、Queue:队列,rabbitmq的内部对象,用于存储消息,其属性类似于Exchange,同样可以设置是否持久化、自动删除等。
消费者重Queue中获取消息并消费。多个消费者可以订阅同一个Queue,这时Queue中的消息会被平均分摊给多个消费者进行处理,而不是每个消费者都收到所有的消息并处理。

3、Binding:绑定,根据路由规则绑定交换器与队列

4、Routing:路由键,路由的关键字

三、消息的可靠性

  • Message acknowledgment:消息确认,在消息确认机制下,收到回执才会删除消息,未收到回执而断开了连接,消息会转发给其他消费者,如果忘记回执,会导致消息堆积,消费者重启后会重复消费这些消息并重复执行业务逻辑。

  • Message durability:消息持久化,设置消息持久化可以避免绝大部分消息丢失,比如rabbitmq服务重启,但是采用非持久化可以提升队列的处理效率。如果要确保消息的持久化,那么消息对应的Exchange和Queue同样要设置为持久化。

  • Prefetch count,每次发送给消费者消息的数量,默认为1

另外,如果需要可靠性业务,需要设置持久化和ack机制,如果系统高吞吐,可以设置为非持久化、noack、自动删除机制

四、简单应用

模拟这样一个业务场景,用户下单成功后,需要给用户增加积分,同时还需要给用户发送下单成功的消息,这是在电商业务中很常见的一个业务场景。

如果系统是微服务架构,可能用户下单功能在订单服务,给用户增加积分的功能在积分服务,给用户发送通知消息的功能在通知服务,各个服务之间解耦,互不影响。那么要实现上述的业务场景,消息中间件rabbitmq是一个很好的选择。
原因如下:

  • 高性能,它的实现语言是天生具备高并发高可用的erlang 语言
  • 支持消息的持久化,即使服务器挂了,也不会丢失消息
  • 消息应答(ack)机制,消费者消费完消息后发送一个消息应答,rabbitmq才会删除消息,确保消息的可靠性
  • 支持高可用集群
  • 灵活的路由

实现思路:

用户下单成功后,rabbitmq发送一条消息至EXCHANGE.ORDER_CREATE交换器,该交换器绑定了两个队列,QUEUE.ORDER_INCREASESCORE、QUEUE.ORDER_NOTIFY,消费者订阅这两个队列分别用来处理增加积分、发送用户通知。如果后续日志系统还需要记录下单的相关日志,那么我们只需要再定义一个队列并将其绑定到EXCHANGE.ORDER_CREATE即可。

下单发rabbitmq消息

package com.robot.rabbitmq;

import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;

import java.io.IOException;
import java.util.UUID;
import java.util.concurrent.TimeoutException;

/**
 * @author: 会跳舞的机器人
 * @date: 2017/10/13 10:46
 * @description: 模拟用户下单之后发送rabbitmq消息
 */
public class OrderCreator {
    // 交换器名称
    private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE";
    // 消息内容
    private static String msg = "create order success";

    /**
     * 模拟创建订单后发送mq消息
     */
    public void createOrder() {
        System.out.println("下单成功,开始发送rabbitmq消息");

        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.12.44");
        connectionFactory.setPort(56720);
        connectionFactory.setUsername("baibei");
        connectionFactory.setPassword("baibei");

        Connection connection;
        Channel channel;
        try {
            connection = connectionFactory.newConnection();
            channel = connection.createChannel();
            // 持久化
            boolean durable = true;
            // topic类型
            String type = "topic";
            // 声明交换器,如果交换器不存在则创建之
            channel.exchangeDeclare(EXCHANGE, type, durable);

            String messgeId = UUID.randomUUID().toString();
            // deliveryMode>=2表示设置消息持久化
            AMQP.BasicProperties props = new AMQP.BasicProperties.Builder().deliveryMode(2).messageId(messgeId).build();
            // 发布消息
            String routingKey = "order_create";
            channel.basicPublish(EXCHANGE, routingKey, props, msg.getBytes("utf-8"));
            connection.close();
        } catch (IOException e) {
            e.printStackTrace();
        } catch (TimeoutException e) {
            e.printStackTrace();
        }
    }
}

积分系统订阅消息

package com.robot.rabbitmq;

import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.Consumer;
import com.rabbitmq.client.Envelope;
import com.rabbitmq.client.ShutdownSignalException;

import java.io.IOException;
import java.util.concurrent.TimeoutException;

/**
 * @author: 会跳舞的机器人
 * @date: 2017/10/13 16:02
 * @description: rabbitmq消费者,模拟下单成功后给用户增加积分
 */
public class IncreaseScoreConsumer implements Consumer {
    private Connection connection;
    private Channel channel;
    // 交换器名称
    private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE";
    // 增加积分队列名称
    private static final String QUEUENAME = "QUEUE.ORDER_INCREASESCORE";


    public void consume() {
        // 初始化rabbitmq连接信息
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.12.44");
        connectionFactory.setPort(56720);
        connectionFactory.setUsername("baibei");
        connectionFactory.setPassword("baibei");
        try {
            connection = connectionFactory.newConnection();
            channel = connection.createChannel();
            // 声明交换器
            channel.exchangeDeclare(EXCHANGE, "topic", true);
            // 声明队列
            channel.queueDeclare(QUEUENAME, true, false, false, null);
            // 交换器与队列绑定并设置routingKey
            channel.queueBind(QUEUENAME, EXCHANGE, "order_create");
            // 消费消息,callback是该类,关闭自动确认消息,在完成业务逻辑后手动确认确认
            channel.basicConsume(QUEUENAME, false, this);
        } catch (IOException e) {
            e.printStackTrace();
        } catch (TimeoutException e) {
            e.printStackTrace();
        }
    }

    public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException {
        String msg = new String(body, "UTF-8");
        System.out.println("《积分系统》收到订单消息:" + msg + ",给用户增加积分......");
        // 手动确认消息
        channel.basicAck(envelope.getDeliveryTag(), false);

        /**
         * channel.basicReject(envelope.getDeliveryTag(), false);该方法会丢弃掉队列中的这条消息
         * channel.basicReject(envelope.getDeliveryTag(), true);该方法会把消息重新放回队列
         * 一般系统会设定一个重试次数,如果超过重试次数,则会丢弃消息,反之则会把消息再放入队列
         */
    }

    public void handleConsumeOk(String consumerTag) {

    }

    public void handleCancelOk(String consumerTag) {

    }

    public void handleCancel(String consumerTag) throws IOException {

    }

    public void handleShutdownSignal(String consumerTag, ShutdownSignalException sig) {

    }

    public void handleRecoverOk(String consumerTag) {

    }

}


通知系统订阅消息

package com.robot.rabbitmq;

import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.Consumer;
import com.rabbitmq.client.Envelope;
import com.rabbitmq.client.ShutdownSignalException;

import java.io.IOException;
import java.util.concurrent.TimeoutException;

/**
 * @author: 会跳舞的机器人
 * @date: 2017/10/13 16:20
 * @description: rabbitmq消费者,模拟下单成功后给用户发送通知
 */
public class NotifyConsumer implements Consumer {
    private Connection connection;
    private Channel channel;

    // 交换器名称
    private static final String EXCHANGE = "EXCHANGE.ORDER_CREATE";
    // 通知用户下单成功通知队列名称
    private static final String QUEUENAME = "QUEUE.ORDER_NOTIFY";


    public void consume() {
        // 初始化rabbitmq连接信息
        ConnectionFactory connectionFactory = new ConnectionFactory();
        connectionFactory.setHost("192.168.12.44");
        connectionFactory.setPort(56720);
        connectionFactory.setUsername("baibei");
        connectionFactory.setPassword("baibei");
        try {
            connection = connectionFactory.newConnection();
            channel = connection.createChannel();
            // 声明交换器
            channel.exchangeDeclare(EXCHANGE, "topic", true);
            // 声明队列
            channel.queueDeclare(QUEUENAME, true, false, false, null);
            // 交换器与队列绑定并设置routingKey
            channel.queueBind(QUEUENAME, EXCHANGE, "order_create");
            // 消费消息,callback是该类,关闭自动确认消息,在完成业务逻辑后手动确认确认
            channel.basicConsume(QUEUENAME, false, this);
        } catch (IOException e) {
            e.printStackTrace();
        } catch (TimeoutException e) {
            e.printStackTrace();
        }
    }

    public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties properties, byte[] body) throws IOException {
        String msg = new String(body, "UTF-8");
        System.out.println("《通知系统》收到订单消息:" + msg + ",开始给用户发送通知......");
        // 手动确认消息
        channel.basicAck(envelope.getDeliveryTag(), false);

        /**
         * channel.basicReject(envelope.getDeliveryTag(), false);该方法会丢弃掉队列中的这条消息
         * channel.basicReject(envelope.getDeliveryTag(), true);该方法会把消息重新放回队列
         * 一般系统会设定一个重试次数,如果超过重试次数,则会丢弃消息,反之则会把消息再放入队列
         */
    }

    public void handleConsumeOk(String consumerTag) {

    }

    public void handleCancelOk(String consumerTag) {

    }

    public void handleCancel(String consumerTag) throws IOException {

    }

    public void handleShutdownSignal(String consumerTag, ShutdownSignalException sig) {

    }

    public void handleRecoverOk(String consumerTag) {

    }
}

测试

package com.robot.rabbitmq;

/**
 * @author: 会跳舞的机器人
 * @date: 2017/10/13 16:27
 * @description:
 */
public class Test {
    public static void main(String[] args) {

        IncreaseScoreConsumer increaseScoreConsumer = new IncreaseScoreConsumer();
        increaseScoreConsumer.consume();

        NotifyConsumer notifyConsumer = new NotifyConsumer();
        notifyConsumer.consume();

        OrderCreator orderCreator = new OrderCreator();
        for (int i = 0; i < 3; i++) {
            orderCreator.createOrder();
        }
    }
}


输出:

下单成功,开始发送rabbitmq消息
《积分系统》收到订单消息:create order success,给用户增加积分......
《通知系统》收到订单消息:create order success,开始给用户发送通知......
下单成功,开始发送rabbitmq消息
《积分系统》收到订单消息:create order success,给用户增加积分......
《通知系统》收到订单消息:create order success,开始给用户发送通知......
下单成功,开始发送rabbitmq消息
《积分系统》收到订单消息:create order success,给用户增加积分......
《通知系统》收到订单消息:create order success,开始给用户发送通知......


推荐阅读更多精彩内容