美文网首页
06-docker安装RabbitMQ

06-docker安装RabbitMQ

作者: wshsdm | 来源:发表于2023-01-23 21:50 被阅读0次

    1 docker安装RabbitMQ

    1.1 拉取镜像

    docker pull rabbitmq:management
    

    1.2 创建挂载本地的data目录

    mkdir -p /home/rabbitmq/data
    

    1.3 创建容器

    docker run --name rabbitmq -d -p 15672:15672 -p 5672:5672 -v /home/rabbitmq/data:/data -e RABBITMQ_DEFAULT_USER=ping -e RABBITMQ_DEFAULT_PASS=123456 rabbitmq:management
    

    --name:指定容器名称
    -d:后台运行
    -p:将 mq 端口号映射到本地
    -v:将/home/rabbitmq/data挂载到容器中的/data目录
    -e RABBITMQ_DEFAULT_USER=ping:设置用户名为 ping
    -e RABBITMQ_DEFAULT_PASS=123456:设置密码为 123456

    1.4 使用浏览器访问 http://IP:15672

    2 Docker搭建RabbitMq的普通集群和镜像集群

    2.1 集群分类

    普通集群:多个节点组成的普通集群,消息随机发送到其中一个节点的队列上,其他节点仅保留元数据,各个节点仅有相同的元数据,即队列结构、交换器结构、vhost等。消费者消费消息时,会从各个节点拉取消息,如果保存消息的节点故障,则无法消费消息,如果做了消息持久化,那么得等该节点恢复,然后才可被消费;如果没有持久化的话,就会产生消息丢失的现象。

    镜像集群:它是在普通模式的基础上,把需要的队列做成镜像队列,存在于多个节点来实现高可用(HA)。该模式解决了上述问题,Broker会主动地将消息实体在各镜像节点间同步,在consumer取数据时无需临时拉取。该模式带来的副作用也很明显,除了降低系统性能外,如果镜像队列数量过多,加之大量的消息进入,集群内部的网络带宽将会被大量消耗。通常地,对可靠性要求较高的场景建议采用镜像模式。

    2.2 启动管理页面

    镜像默认没有开启web管理页面,所以我们通过exec命令进入容器启动

    docker exec -it 639a151c5440 /bin/bash
    # 容器中执行
    rabbitmq-plugins enable rabbitmq_management
    

    2.3 设置erlang cookie

    先通过docker logs命令查看容器的运行日志,寻找home dir参数

    docker logs rabbitmq1
    

    .erlang.cookie文件在此路径下,我们进入容器可以看到此文件

     ls -a /var/lib/rabbitmq
    

    再设置erlang cookie的权限,在容器内运行如下代码,如果权限不够后续操作会报错

    chmod 600 /var/lib/rabbitmq/.erlang.cookie
    

    通过docker cp命令将rabbitmq1中的.erlang.cookie文件拷到物理机上再拷贝到rabbitmq2的容器中,
    复制之后需要重启rabbitmq2容器,否则执行rabbitmqctl命令报错

    2.4 普通模式

    • 重启后进入容器将rabbitmq2的节点加入rabbitmq1中创建普通集群,分别执行如下代码
    rabbitmqctl stop_app
    rabbitmqctl reset
    rabbitmqctl join_cluster --ram rabbit@myRabbit1    //myRabbitmq1为rabbitmq1容器中rabbitmq的hostname
    rabbitmqctl start_app
    

    2.5 镜像模式

    • 镜像模式就是在普通模式的基础上进入rabbitmq1容器输入如下命令
    rabbitmqctl set_policy -p my_vhost1 ha-all "^" '{"ha-mode":"all"}' --apply-to all
    
    • 具体的格式为
    rabbitmqctl set_policy [-p Vhost] Name Pattern Definition [Priority]
    -p Vhost: 可选参数,针对指定vhost下的queue进行设置
    Name: policy的名称
    Pattern: queue的匹配模式(正则表达式)
    Definition:镜像定义,包括三个部分ha-mode, ha-params, ha-sync-mode
            ha-mode:指明镜像队列的模式,有效值为 all/exactly/nodes
                all:表示在集群中所有的节点上进行镜像
                exactly:表示在指定个数的节点上进行镜像,节点的个数由ha-params指定
                nodes:表示在指定的节点上进行镜像,节点名称通过ha-params指定
            ha-params:作为参数,为ha-mode的补充
            ha-sync-mode:进行队列中消息的同步方式,有效值为automatic和manual
    priority:可选参数,policy的优先级
    
    rabbitmqctl set_policy ha-all "^" '{"ha-mode":"all"}' --apply-to all
    
    • 或者登录rabbitmq管理页面 ——> Admin ——> Policies ——> Add / update a policy
    name:策略名称
    Pattern:^ 匹配符,只有一个^代表匹配所有。^message指同步“message”开头的队列名称
    Definition:ha-mode=all 为匹配类型,分为3种模式:all(表示所有的queue)
    Priority:优先级,首先根据priority排序,值越大的优先级越高;相同priority则根据创建时间排序,越晚创建的优先级越高。
    
    简单说明一下 Operator Policy 和 User Policy 的区别:
    
    Operator Policy 是给服务提供商或公司基础设施部门用来设置某些需要强制执行的通用规则
    User Policy 是给业务应用用来设置的规则
    Operator Policy 和 User Policy 会合并后作用于队列,并且为防止 Operator Policy 对队列某些关键属性例如死信队列交换器Dead Letter Exchange的覆盖导致业务应用产生非预期的结果,Operator Policy 只支持expire、message-ttl、max-length、max-length-bytes4个参数。
    

    3 Springboot 整合RabbitMq

    3.1 Rabbit管理界面

    手动创建虚拟host,创建用户,分配权限,创建交换机,创建队列等等,还有查看队列消息,消费效率,推送效率等等

    3.2 交换机分类

    常用的交换机有以下三种,因为消费者是从队列获取信息的,队列是绑定交换机的(一般),所以对应的消息推送/接收模式也会有以下几种:

    1. Direct Exchange
      直连型交换机,根据消息携带的路由键将消息投递给对应队列。
      大致流程,有一个队列绑定到一个直连交换机上,同时赋予一个路由键 routing key 。
      然后当一个消息携带着路由值为X,这个消息通过生产者发送给交换机时,交换机就会根据这个路由值X去寻找绑定值也是X的队列。
    2. Fanout Exchange
      扇型交换机,这个交换机没有路由键概念,就算你绑了路由键也是无视的。 这个交换机在接收到消息后,会直接转发到绑定到它上面的所有队列。
    3. Topic Exchange
      主题交换机,这个交换机其实跟直连交换机流程差不多,但是它的特点就是在它的路由键和绑定键之间是有规则的。
      简单地介绍下规则:
    *  (星号) 用来表示一个单词 (必须出现的)
    #  (井号) 用来表示任意数量(零个或多个)单词
    

    另外还有 Header Exchange 头交换机 ,Default Exchange 默认交换机,Dead Letter Exchange 死信交换机

    3.3 创建springboot项目

    一个 rabbitmq-provider (生产者),一个rabbitmq-consumer(消费者)。

    生产者代码

    首先创建 rabbitmq-provider

    • pom.xml
          <!--rabbitmq-->
          <dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter-amqp</artifactId>
            </dependency>
            <dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter-web</artifactId>
            </dependency>
    
    • 配置文件application.yml
    server:
      port: 8021
    spring:
      #给项目来个名字
      application:
        name: rabbitmq-provider
      #配置rabbitMq 服务器
      rabbitmq:
        host: 192.168.75.131
        port: 5672
        username: root
        password: root
        #虚拟host 可以不设置,使用server默认host
        virtual-host: wu
    

    里面的虚拟host配置项不是必须的,我自己在rabbitmq服务上创建了自己的虚拟host,所以我配置了;你们不创建,就不用加这个配置项。

    • 直连型交换机, 创建DirectRabbitConfig.java
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.DirectExchange;
    import org.springframework.amqp.core.Queue;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class DirectRabbitConfig { 
        //队列 起名:TestDirectQueue
        @Bean
        public Queue TestDirectQueue() {
            // durable:是否持久化,默认是false,持久化队列:会被存储在磁盘上,当消息代理重启时仍然存在,暂存队列:当前连接有效
            // exclusive:默认也是false,只能被当前创建的连接使用,而且当连接关闭后队列即被删除。此参考优先级高于durable
            // autoDelete:是否自动删除,当没有生产者或者消费者使用此队列,该队列会自动删除。
            //   return new Queue("TestDirectQueue",true,true,false);
     
            //一般设置一下队列的持久化就好,其余两个就是默认false
            return new Queue("TestDirectQueue",true);
        } 
        //Direct交换机 起名:TestDirectExchange
        @Bean
        DirectExchange TestDirectExchange() {
          //  return new DirectExchange("TestDirectExchange",true,true);
            return new DirectExchange("TestDirectExchange",true,false);
        } 
        //绑定  将队列和交换机绑定, 并设置用于匹配键:TestDirectRouting
        @Bean
        Binding bindingDirect() {
            return BindingBuilder.bind(TestDirectQueue()).to(TestDirectExchange()).with("TestDirectRouting");
        }
        @Bean
        DirectExchange lonelyDirectExchange() {
            return new DirectExchange("lonelyDirectExchange");
        }
    }
    
    • 消息推送,SendMessageController.java
    import org.springframework.amqp.rabbit.core.RabbitTemplate;
    import org.springframework.beans.factory.annotation.Autowired;
    import org.springframework.web.bind.annotation.GetMapping;
    import org.springframework.web.bind.annotation.RestController;
    import java.time.LocalDateTime;
    import java.time.format.DateTimeFormatter;
    import java.util.HashMap;
    import java.util.Map;
    import java.util.UUID;
     
    @RestController
    public class SendMessageController { 
        @Autowired
        RabbitTemplate rabbitTemplate;  //使用RabbitTemplate,这提供了接收/发送等等方法
     
        @GetMapping("/sendDirectMessage")
        public String sendDirectMessage() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "test message, hello!";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String,Object> map=new HashMap<>();
            map.put("messageId",messageId);
            map.put("messageData",messageData);
            map.put("createTime",createTime);
            //将消息携带绑定键值:TestDirectRouting 发送到交换机TestDirectExchange
            rabbitTemplate.convertAndSend("TestDirectExchange", "TestDirectRouting", map);
            return "ok";
        }
    }
    
    消费者代码,创建rabbitmq-consumer项目
    • pom.xml
            <!--rabbitmq-->
            <dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter-amqp</artifactId>
            </dependency>
            <dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter</artifactId>
            </dependency>
    
    • 配置文件 application.yml
    server:
      port: 8022
    spring:
      #给项目来个名字
      application:
        name: rabbitmq-consumer
      #配置rabbitMq 服务器
      rabbitmq:
        host: 192.168.75.131
        port: 5672
        username: root
        password: root
        #虚拟host 可以不设置,使用server默认host
        virtual-host: wu
    
    • 创建DirectRabbitConfig.java
      消费者单纯的使用,其实可以不用添加这个配置,直接建后面的监听就好,使用注解来让监听器监听对应的队列即可。配置上了的话,其实消费者也是生成者的身份,也能推送该消息。
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.DirectExchange;
    import org.springframework.amqp.core.Queue;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class DirectRabbitConfig { 
        //队列 起名:TestDirectQueue
        @Bean
        public Queue TestDirectQueue() {
            return new Queue("TestDirectQueue",true);
        } 
        //Direct交换机 起名:TestDirectExchange
        @Bean
        DirectExchange TestDirectExchange() {
            return new DirectExchange("TestDirectExchange");
        } 
        //绑定  将队列和交换机绑定, 并设置用于匹配键:TestDirectRouting
        @Bean
        Binding bindingDirect() {
            return BindingBuilder.bind(TestDirectQueue()).to(TestDirectExchange()).with("TestDirectRouting");
        }
    }
    
    • 创建消息接收监听类,DirectReceiver.java
    @Component
    @RabbitListener(queues = "TestDirectQueue")//监听的队列名称 TestDirectQueue
    public class DirectReceiver {
     
        @RabbitHandler
        public void process(Map testMessage) {
            System.out.println("DirectReceiver消费者收到消息  : " + testMessage.toString());
        } 
    }
    
    • 实现了轮询的方式对消息进行消费,而且不存在重复消费
    使用Topic Exchange 主题交换机
    • 在rabbitmq-provider项目里面创建TopicRabbitConfig.java
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.Queue;
    import org.springframework.amqp.core.TopicExchange;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class TopicRabbitConfig {
        //绑定键
        public final static String man = "topic.man";
        public final static String woman = "topic.woman";
     
        @Bean
        public Queue firstQueue() {
            return new Queue(TopicRabbitConfig.man);
        } 
        @Bean
        public Queue secondQueue() {
            return new Queue(TopicRabbitConfig.woman);
        } 
        @Bean
        TopicExchange exchange() {
            return new TopicExchange("topicExchange");
        } 
        //将firstQueue和topicExchange绑定,而且绑定的键值为topic.man
        //这样只要是消息携带的路由键是topic.man,才会分发到该队列
        @Bean
        Binding bindingExchangeMessage() {
            return BindingBuilder.bind(firstQueue()).to(exchange()).with(man);
        } 
        //将secondQueue和topicExchange绑定,而且绑定的键值为用上通配路由键规则topic.#
        // 这样只要是消息携带的路由键是以topic.开头,都会分发到该队列
        @Bean
        Binding bindingExchangeMessage2() {
            return BindingBuilder.bind(secondQueue()).to(exchange()).with("topic.#");
        }
    }
    
    • 加多2个接口,用于推送消息到主题交换机
        @GetMapping("/sendTopicMessage1")
        public String sendTopicMessage1() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "message: M A N ";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String, Object> manMap = new HashMap<>();
            manMap.put("messageId", messageId);
            manMap.put("messageData", messageData);
            manMap.put("createTime", createTime);
            rabbitTemplate.convertAndSend("topicExchange", "topic.man", manMap);
            return "ok";
        }
     
        @GetMapping("/sendTopicMessage2")
        public String sendTopicMessage2() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "message: woman is all ";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String, Object> womanMap = new HashMap<>();
            womanMap.put("messageId", messageId);
            womanMap.put("messageData", messageData);
            womanMap.put("createTime", createTime);
            rabbitTemplate.convertAndSend("topicExchange", "topic.woman", womanMap);
            return "ok";
        }
    }
    
    • 在rabbitmq-consumer项目上,创建TopicManReceiver.java
    import org.springframework.amqp.rabbit.annotation.RabbitHandler;
    import org.springframework.amqp.rabbit.annotation.RabbitListener;
    import org.springframework.stereotype.Component;
    import java.util.Map;
    
    @Component
    @RabbitListener(queues = "topic.man")
    public class TopicManReceiver {
     
        @RabbitHandler
        public void process(Map testMessage) {
            System.out.println("TopicManReceiver消费者收到消息  : " + testMessage.toString());
        }
    }
    
    • 再创建一个TopicTotalReceiver.java:
    package com.elegant.rabbitmqconsumer.receiver;
     
    import org.springframework.amqp.rabbit.annotation.RabbitHandler;
    import org.springframework.amqp.rabbit.annotation.RabbitListener;
    import org.springframework.stereotype.Component;
    import java.util.Map;
     
    @Component
    @RabbitListener(queues = "topic.woman")
    public class TopicTotalReceiver {
     
        @RabbitHandler
        public void process(Map testMessage) {
            System.out.println("TopicTotalReceiver消费者收到消息  : " + testMessage.toString());
        }
    }
    
    • 加主题交换机的相关配置,TopicRabbitConfig.java
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.Queue;
    import org.springframework.amqp.core.TopicExchange;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class TopicRabbitConfig {
        //绑定键
        public final static String man = "topic.man";
        public final static String woman = "topic.woman"; 
        @Bean
        public Queue firstQueue() {
            return new Queue(TopicRabbitConfig.man);
        } 
        @Bean
        public Queue secondQueue() {
            return new Queue(TopicRabbitConfig.woman);
        } 
        @Bean
        TopicExchange exchange() {
            return new TopicExchange("topicExchange");
        }
     
        //将firstQueue和topicExchange绑定,而且绑定的键值为topic.man
        //这样只要是消息携带的路由键是topic.man,才会分发到该队列
        @Bean
        Binding bindingExchangeMessage() {
            return BindingBuilder.bind(firstQueue()).to(exchange()).with(man);
        }
     
        //将secondQueue和topicExchange绑定,而且绑定的键值为用上通配路由键规则topic.#
        // 这样只要是消息携带的路由键是以topic.开头,都会分发到该队列
        @Bean
        Binding bindingExchangeMessage2() {
            return BindingBuilder.bind(secondQueue()).to(exchange()).with("topic.#");
        } 
    }
    
    使用Fanout Exchang 扇型交换机
    • 在rabbitmq-provider项目上创建FanoutRabbitConfig.java:
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.FanoutExchange;
    import org.springframework.amqp.core.Queue;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class FanoutRabbitConfig { 
        /**
         *  创建三个队列 :fanout.A   fanout.B  fanout.C
         *  将三个队列都绑定在交换机 fanoutExchange 上
         *  因为是扇型交换机, 路由键无需配置,配置也不起作用
         */ 
        @Bean
        public Queue queueA() {
            return new Queue("fanout.A");
        } 
        @Bean
        public Queue queueB() {
            return new Queue("fanout.B");
        } 
        @Bean
        public Queue queueC() {
            return new Queue("fanout.C");
        } 
        @Bean
        FanoutExchange fanoutExchange() {
            return new FanoutExchange("fanoutExchange");
        } 
        @Bean
        Binding bindingExchangeA() {
            return BindingBuilder.bind(queueA()).to(fanoutExchange());
        } 
        @Bean
        Binding bindingExchangeB() {
            return BindingBuilder.bind(queueB()).to(fanoutExchange());
        } 
        @Bean
        Binding bindingExchangeC() {
            return BindingBuilder.bind(queueC()).to(fanoutExchange());
        }
    }
    
    • 推送消息方法
        @GetMapping("/sendFanoutMessage")
        public String sendFanoutMessage() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "message: testFanoutMessage ";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String, Object> map = new HashMap<>();
            map.put("messageId", messageId);
            map.put("messageData", messageData);
            map.put("createTime", createTime);
            rabbitTemplate.convertAndSend("fanoutExchange", null, map);
            return "ok";
        }
    
    • 在rabbitmq-consumer项目里加上消息消费类FanoutReceiverA.java
    import org.springframework.amqp.rabbit.annotation.RabbitHandler;
    import org.springframework.amqp.rabbit.annotation.RabbitListener;
    import org.springframework.stereotype.Component;
    import java.util.Map;
    
    @Component
    @RabbitListener(queues = "fanout.A")
    public class FanoutReceiverA { 
        @RabbitHandler
        public void process(Map testMessage) {
            System.out.println("FanoutReceiverA消费者收到消息  : " +testMessage.toString());
        } 
    }
    
    • FanoutReceiverB.java
    import org.springframework.amqp.rabbit.annotation.RabbitHandler;
    import org.springframework.amqp.rabbit.annotation.RabbitListener;
    import org.springframework.stereotype.Component;
    import java.util.Map;
    
    @Component
    @RabbitListener(queues = "fanout.B")
    public class FanoutReceiverB {
     
        @RabbitHandler
        public void process(Map testMessage) {
            System.out.println("FanoutReceiverB消费者收到消息  : " +testMessage.toString());
        } 
    }
    
    • 扇型交换机的配置类,FanoutRabbitConfig.java
    import org.springframework.amqp.core.Binding;
    import org.springframework.amqp.core.BindingBuilder;
    import org.springframework.amqp.core.FanoutExchange;
    import org.springframework.amqp.core.Queue;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration;
    
    @Configuration
    public class FanoutRabbitConfig { 
        /**
         *  创建三个队列 :fanout.A   fanout.B 
    
         *  将三个队列都绑定在交换机 fanoutExchange 上
         *  因为是扇型交换机, 路由键无需配置,配置也不起作用
         */ 
        @Bean
        public Queue queueA() {
            return new Queue("fanout.A");
        } 
        @Bean
        public Queue queueB() {
            return new Queue("fanout.B");
        }
       
        @Bean
        FanoutExchange fanoutExchange() {
            return new FanoutExchange("fanoutExchange");
        } 
        @Bean
        Binding bindingExchangeA() {
            return BindingBuilder.bind(queueA()).to(fanoutExchange());
        } 
        @Bean
        Binding bindingExchangeB() {
            return BindingBuilder.bind(queueB()).to(fanoutExchange());
        } 
    }
    
    • 在rabbitmq-provider项目的application.yml文件上,加上消息确认的配置项后
      在配置确认回调,测试发现无法触发回调函数,那么存在原因也许是因为版本导致的配置项不起效,
      可以把publisher-confirms: true 替换为 publisher-confirm-type: correlated
    server:
      port: 8021
    spring:
      #给项目来个名字
      application:
        name: rabbitmq-provider
      #配置rabbitMq 服务器
      rabbitmq:
        host: 127.0.0.1
        port: 5672
        username: root
        password: root
        #虚拟host 可以不设置,使用server默认host
        virtual-host: JCcccHost
          #确认消息已发送到交换机(Exchange)
        #publisher-confirms: true
        publisher-confirm-type: correlated
          #确认消息已发送到队列(Queue)
        publisher-returns: true
    
    • 配置相关的消息确认回调函数,RabbitConfig.java
    import org.springframework.amqp.core.Message;
    import org.springframework.amqp.rabbit.connection.ConnectionFactory;
    import org.springframework.amqp.rabbit.connection.CorrelationData;
    import org.springframework.amqp.rabbit.core.RabbitTemplate;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration; 
    
    @Configuration
    public class RabbitConfig { 
        @Bean
        public RabbitTemplate createRabbitTemplate(ConnectionFactory connectionFactory){
            RabbitTemplate rabbitTemplate = new RabbitTemplate();
            rabbitTemplate.setConnectionFactory(connectionFactory);
            //设置开启Mandatory,才能触发回调函数,无论消息推送结果怎么样都强制调用回调函数
            rabbitTemplate.setMandatory(true);
     
            rabbitTemplate.setConfirmCallback(new RabbitTemplate.ConfirmCallback() {
                @Override
                public void confirm(CorrelationData correlationData, boolean ack, String cause) {
                    System.out.println("ConfirmCallback:     "+"相关数据:"+correlationData);
                    System.out.println("ConfirmCallback:     "+"确认情况:"+ack);
                    System.out.println("ConfirmCallback:     "+"原因:"+cause);
                }
            });
     
            rabbitTemplate.setReturnCallback(new RabbitTemplate.ReturnCallback() {
                @Override
                public void returnedMessage(Message message, int replyCode, String replyText, String exchange, String routingKey) {
                    System.out.println("ReturnCallback:     "+"消息:"+message);
                    System.out.println("ReturnCallback:     "+"回应码:"+replyCode);
                    System.out.println("ReturnCallback:     "+"回应信息:"+replyText);
                    System.out.println("ReturnCallback:     "+"交换机:"+exchange);
                    System.out.println("ReturnCallback:     "+"路由键:"+routingKey);
                }
            }); 
            return rabbitTemplate;
        } 
    }
    
    • 两个回调函数,一个叫 ConfirmCallback ,一个叫 RetrunCallback
      先从总体的情况分析,推送消息存在四种情况:

    ①消息推送到server,但是在server里找不到交换机
    ②消息推送到server,找到交换机了,但是没找到队列
    ③消息推送到sever,交换机和队列啥都没找到
    ④消息推送成功

    针对四种情况

    ①消息推送到server,但是在server里找不到交换机
    写个测试接口,把消息推送到名为‘non-existent-exchange’的交换机上(这个交换机是没有创建没有配置的):
    ①这种情况触发的是 ConfirmCallback 回调函数。

        @GetMapping("/TestMessageAck")
        public String TestMessageAck() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "message: non-existent-exchange test message ";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String, Object> map = new HashMap<>();
            map.put("messageId", messageId);
            map.put("messageData", messageData);
            map.put("createTime", createTime);
            rabbitTemplate.convertAndSend("non-existent-exchange", "TestDirectRouting", map);
            return "ok";
        }
    

    ②消息推送到server,找到交换机了,但是没找到队列
    这种情况就是需要新增一个交换机,但是不给这个交换机绑定队列,我来简单地在DirectRabitConfig里面新增一个直连交换机,名叫‘lonelyDirectExchange’,但没给它做任何绑定配置操作:

        @Bean
        DirectExchange lonelyDirectExchange() {
            return new DirectExchange("lonelyDirectExchange");
        }
    

    然后写个测试接口,把消息推送到名为‘lonelyDirectExchange’的交换机上(这个交换机是没有任何队列配置的):

        @GetMapping("/TestMessageAck2")
        public String TestMessageAck2() {
            String messageId = String.valueOf(UUID.randomUUID());
            String messageData = "message: lonelyDirectExchange test message ";
            String createTime = LocalDateTime.now().format(DateTimeFormatter.ofPattern("yyyy-MM-dd HH:mm:ss"));
            Map<String, Object> map = new HashMap<>();
            map.put("messageId", messageId);
            map.put("messageData", messageData);
            map.put("createTime", createTime);
            rabbitTemplate.convertAndSend("lonelyDirectExchange", "TestDirectRouting", map);
            return "ok";
        }
    

    这种情况,两个函数都被调用了;
    这种情况下,消息是推送成功到服务器了的,所以ConfirmCallback对消息确认情况是true;
    而在RetrunCallback回调函数的打印参数里面可以看到,消息是推送到了交换机成功了,但是在路由分发给队列的时候,找不到队列,所以报了错误 NO_ROUTE 。
    结论:②这种情况触发的是 ConfirmCallback和RetrunCallback两个回调函数。
    ③消息推送到sever,交换机和队列啥都没找到
    这种情况其实一看就觉得跟①很像,没错 ,③和①情况回调是一致的,所以不做结果说明了。
    结论: ③这种情况触发的是 ConfirmCallback 回调函数。
    ④消息推送成功
    结论: ④这种情况触发的是 ConfirmCallback 回调函数。

    3.4 消费者接收到消息的消息确认机制

    消息接收的确认机制主要存在三种模式:

    ①自动确认, 这也是默认的消息确认情况。 AcknowledgeMode.NONE
    RabbitMQ成功将消息发出(即将消息成功写入TCP Socket)中立即认为本次投递已经被正确处理,不管消费者端是否成功处理本次投递。
    所以这种情况如果消费端消费逻辑抛出异常,也就是消费端没有处理成功这条消息,那么就相当于丢失了消息。
    一般这种情况我们都是使用try catch捕捉异常后,打印日志用于追踪数据,这样找出对应数据再做后续处理。

    ② 根据情况确认, 这个不做介绍
    ③ 手动确认 , 这个比较关键,也是我们配置接收消息确认机制时,多数选择的模式。
    消费者收到消息后,手动调用basic.ack/basic.nack/basic.reject后,RabbitMQ收到这些消息后,才认为本次投递成功。
    basic.ack用于肯定确认
    basic.nack用于否定确认(注意:这是AMQP 0-9-1的RabbitMQ扩展)
    basic.reject用于否定确认,但与basic.nack相比有一个限制:一次只能拒绝单条消息

    消费者端以上的3个方法都表示消息已经被正确投递,但是basic.ack表示消息已经被正确处理。
    而basic.nack,basic.reject表示没有被正确处理:

    reject,因为有时候一些场景是需要重新入列的。

    channel.basicReject(deliveryTag, true); 拒绝消费当前消息,如果第二参数传入true,就是将数据重新丢回队列里,那么下次还会消费这消息。设置false,就是告诉服务器,我已经知道这条消息数据了,因为一些原因拒绝它,而且服务器也把这个消息丢掉就行。 下次不想再消费这条消息了。

    使用拒绝后重新入列这个确认模式要谨慎,因为一般都是出现异常的时候,catch异常再拒绝入列,选择是否重入列。

    但是如果使用不当会导致一些每次都被你重入列的消息一直消费-入列-消费-入列这样循环,会导致消息积压。

    顺便也简单讲讲 nack,这个也是相当于设置不消费某条消息。

    channel.basicNack(deliveryTag, false, true);
    第一个参数依然是当前消息到的数据的唯一id;
    第二个参数是指是否针对多条消息;如果是true,也就是说一次性针对当前通道的消息的tagID小于当前这条消息的,都拒绝确认。
    第三个参数是指是否重新入列,也就是指不确认的消息是否重新丢回到队列里面去。
    同样使用不确认后重新入列这个确认模式要谨慎,因为这里也可能因为考虑不周出现消息一直被重新丢回去的情况,导致积压。

    3.5 手动确认

    • 消费者项目里,新建MessageListenerConfig.java上添加代码相关的配置代码
    import com.elegant.rabbitmqconsumer.receiver.MyAckReceiver;
    import org.springframework.amqp.core.AcknowledgeMode;
    import org.springframework.amqp.core.Queue;
    import org.springframework.amqp.rabbit.connection.CachingConnectionFactory;
    import org.springframework.amqp.rabbit.listener.SimpleMessageListenerContainer;
    import org.springframework.beans.factory.annotation.Autowired;
    import org.springframework.context.annotation.Bean;
    import org.springframework.context.annotation.Configuration; 
    
    @Configuration
    public class MessageListenerConfig { 
        @Autowired
        private CachingConnectionFactory connectionFactory;
        @Autowired
        private MyAckReceiver myAckReceiver;//消息接收处理类 
        @Bean
        public SimpleMessageListenerContainer simpleMessageListenerContainer() {
            SimpleMessageListenerContainer container = new SimpleMessageListenerContainer(connectionFactory);
            container.setConcurrentConsumers(1);
            container.setMaxConcurrentConsumers(1);
            container.setAcknowledgeMode(AcknowledgeMode.MANUAL); // RabbitMQ默认是自动确认,这里改为手动确认消息
            //设置一个队列
            container.setQueueNames("TestDirectQueue");
            //如果同时设置多个如下: 前提是队列都是必须已经创建存在的
            //  container.setQueueNames("TestDirectQueue","TestDirectQueue2","TestDirectQueue3");  
            //另一种设置队列的方法,如果使用这种情况,那么要设置多个,就使用addQueues
            //container.setQueues(new Queue("TestDirectQueue",true));
            //container.addQueues(new Queue("TestDirectQueue2",true));
            //container.addQueues(new Queue("TestDirectQueue3",true));
            container.setMessageListener(myAckReceiver); 
            return container;
        } 
    }
    
    • 对应的手动确认消息监听类,MyAckReceiver.java(手动确认模式需要实现 ChannelAwareMessageListener):
    import com.rabbitmq.client.Channel;
    import org.springframework.amqp.core.Message;
    import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
    import org.springframework.stereotype.Component; 
    import java.io.ByteArrayInputStream;
    import java.io.ObjectInputStream;
    import java.util.Map;
     
    @Component 
    public class MyAckReceiver implements ChannelAwareMessageListener { 
        @Override
        public void onMessage(Message message, Channel channel) throws Exception {
            long deliveryTag = message.getMessageProperties().getDeliveryTag();
            try {
                byte[] body = message.getBody();
                ObjectInputStream ois = new ObjectInputStream(new ByteArrayInputStream(body));
                Map<String,String> msgMap = (Map<String,String>) ois.readObject();
                String messageId = msgMap.get("messageId");
                String messageData = msgMap.get("messageData");
                String createTime = msgMap.get("createTime");
                ois.close();
                System.out.println("  MyAckReceiver  messageId:"+messageId+"  messageData:"+messageData+"  createTime:"+createTime);
                System.out.println("消费的主题消息来自:"+message.getMessageProperties().getConsumerQueue());
                channel.basicAck(deliveryTag, true); //第二个参数,手动确认可以被批处理,当该参数为 true 时,则可以一次性确认 delivery_tag 小于等于传入值的所有消息
    //          channel.basicReject(deliveryTag, true);//第二个参数,true会重新放回队列,所以需要自己根据业务逻辑判断什么时候使用拒绝
            } catch (Exception e) {
                channel.basicReject(deliveryTag, false);
                e.printStackTrace();
            }
        }    
    }
    
    • 除了直连交换机的队列TestDirectQueue需要变成手动确认以外,我们还需要将一个其他的队列或者多个队列也变成手动确认,而且不同队列实现不同的业务处理。
      往SimpleMessageListenerContainer里添加多个队列
    @Bean
    public SimpleMessageListenerContainer simpleMessageListenerContainer(){
    SimpleMessageListenerContainer container=new SimpleMessageListenerContainer();
    container.setConcurrentConsumers(1);
    container.setMaxConcurrentConsumers(1);
    container.setAcknowledgeMode(AcknowledgeMode.MANUAL);
    // 同时设置多个:队列都是必须已经创建存在
    container.setQueueNames("TestDirectQueue","fanout.A");
    container.setMessageListener(myAckReceiver);
    return container;
    }
    
    • 手动确认消息监听类,MyAckReceiver.java 就可以同时将上面设置到的队列的消息都消费下来。

    但是我们需要做不用的业务逻辑处理,那么只需要 根据消息来自的队列名进行区分处理即可

    import com.rabbitmq.client.Channel;
    import org.springframework.amqp.core.Message;
    import org.springframework.amqp.rabbit.listener.api.ChannelAwareMessageListener;
    import org.springframework.stereotype.Component;
    import java.io.ByteArrayInputStream;
    import java.io.ObjectInputStream;
    import java.util.Map; 
     
    @Component
    public class MyAckReceiver implements ChannelAwareMessageListener {
     
        @Override
        public void onMessage(Message message, Channel channel) throws Exception {
            long deliveryTag = message.getMessageProperties().getDeliveryTag();
            try {
                byte[] body = message.getBody();
                ObjectInputStream ois = new ObjectInputStream(new ByteArrayInputStream(body));
                Map<String,String> msgMap = (Map<String,String>) ois.readObject();
                String messageId = msgMap.get("messageId");
                String messageData = msgMap.get("messageData");
                String createTime = msgMap.get("createTime");
                ois.close();
     
                if ("TestDirectQueue".equals(message.getMessageProperties().getConsumerQueue())){
                    System.out.println("消费的消息来自的队列名为:"+message.getMessageProperties().getConsumerQueue());
                    System.out.println("消息成功消费到  messageId:"+messageId+"  messageData:"+messageData+"  createTime:"+createTime);
                    System.out.println("执行TestDirectQueue中的消息的业务处理流程......");
                    
                }
     
                if ("fanout.A".equals(message.getMessageProperties().getConsumerQueue())){
                    System.out.println("消费的消息来自的队列名为:"+message.getMessageProperties().getConsumerQueue());
                    System.out.println("消息成功消费到  messageId:"+messageId+"  messageData:"+messageData+"  createTime:"+createTime);
                    System.out.println("执行fanout.A中的消息的业务处理流程......");
     
                }
                
                channel.basicAck(deliveryTag, true);
    //          channel.basicReject(deliveryTag, true);//为true会重新放回队列
            } catch (Exception e) {
                channel.basicReject(deliveryTag, false);
                e.printStackTrace();
            }
        }
    }
    

    相关文章

      网友评论

          本文标题:06-docker安装RabbitMQ

          本文链接:https://www.haomeiwen.com/subject/unilhdtx.html