SpringCloud系列（51）--SpringCloud Stream之使用分组解决消息重复消费问题

前言：在上一节中我们实现了SpringCloud Stream消息驱动里的消费者，实现了消息的消费者后，在日常运行中我们可能会遇到重复消费的问题，比如在如下场景中，订单系统我们做集群部署，都会从RabbitMQ中获取订单信息，那如果一个订单同时被两个服务获取到，那么就会造成数据错误，我们得避免这种情况，这时我们就可以使用Stream中的消息分组来解决

1、再次创建一个消费者模块，命为cloud-stream-rabbitmq-consumer8803

(1)在父工程下新建模块

(2)选择模块的项目类型为Maven并选择模块要使用的JDK版本

​

(3)填写子模块的名称，然后点完成即可完成创建

效果图：

(4)修改cloud-stream-rabbitmq-consumer8802子模块的pom.xml文件，然后reolad一下，下载依赖

例：

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <parent>
        <artifactId>springcloud01</artifactId>
        <groupId>com.ken.springcloud</groupId>
        <version>1.0-SNAPSHOT</version>
    </parent>
    <modelVersion>4.0.0</modelVersion>

    <artifactId>cloud-stream-rabbitmq-consumer8803</artifactId>

    <dependencies>
        <!--以下依赖都没写版本号，没写版本号的情况下会引用父项目的版本-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
        <!--监控-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-actuator</artifactId>
        </dependency>
        <!--Eureka Clinet-->
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-stream-rabbit</artifactId>
        </dependency>
        <!--热部署-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-devtools</artifactId>
            <scope>runtime</scope>
            <optional>true</optional>
        </dependency>
        <!--lombok插件-->
        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <optional>true</optional>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>
    </dependencies>

</project>

(5)为子模块添加名为application的yml配置文件

效果图：

(6)修改application.yml文件配置（注：因为当前实现的是消费者，所以spring.cloud.stream.bindings下要写成input，表示当前是消费者）

server:
  port: 8803

spring:
  application:
    name: cloud-stream-consumer
  cloud:
    stream:
      #在此处配置要绑定的rabbitmq的服务信息
      binders:
        #表示定义的名称，用于于binding整合
        defaultRabbit:
          #消息组件类型，表示用到的组件是rabbit
          type: rabbit
          #设置rabbitmq的相关的环境配置
          environment:
            spring:
              rabbitmq:
                host: localhost
                port: 5672
                username: guest
                password: guest
      #服务的整合处理
      bindings:
        #这个名字是一个通道的名称
        input:
          #表示要使用的Exchange名称定义
          destination: studyExchange
          #设置消息类型，本次为json，文本则设置"text/plain"
          content-type: application/json
          #设置要绑定的消息服务的具体设置
          binder: defaultRabbit

eureka:
  #客户端进行Eureka注册的配置
  client:
    service-url:
      defaultZone: http://localhost:7001/eureka
  instance:
    #设置心跳的时间间隔（默认是30秒)
    lease-renewal-interval-in-seconds: 2
    #如果现在超过了5秒的间隔（默认是90秒)
    lease-expiration-duration-in-seconds: 5
    #在信息列表时显示主机名称
    instance-id: receive-8002.com
    #访问的路径变为IP地址
    prefer-ip-address: true

(7)为cloud-stream-rabbitmq-consumer8803子模块新建一个主启动类，类名输入com.ken.springcloud.StreamMQMain8803，然后创建即可

效果图：

(8)编写StreamMQMain8803主启动类

package com.ken.springcloud;

import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;

@SpringBootApplication
public class StreamMQMain8803 {
    public static void main(String[] args) {
        SpringApplication.run(StreamMQMain8803.class, args);
    }
}

2、在com.ken.springcloud包下新建一个名为controller的包

效果图：

3、在controller包下新建一个名为ReceiveMessageListencerController的控制类

效果图：

4、编写ReceiveMessageListencerController类

package com.ken.springcloud.controller;

import org.springframework.beans.factory.annotation.Value;
import org.springframework.cloud.stream.annotation.EnableBinding;
import org.springframework.cloud.stream.annotation.StreamListener;
import org.springframework.cloud.stream.messaging.Sink;
import org.springframework.messaging.Message;
import org.springframework.stereotype.Component;

@Component
@EnableBinding(Sink.class)
public class ReceiveMessageListencerController {

    @Value("${server.port}")
    private String serverPort;

    @StreamListener(Sink.INPUT)
    public void input(Message<String> message) {
        System.out.println("消费者1号--->接受到的消息：" + message.getPayload() + "\t port:" + serverPort);
    }

}

5、分别启动eureka-server7001、RabbitMQ、cloud-stream-rabbitmq-provider8801、cloud-stream-rabbitmq-consumer8802、cloud-stream-rabbitmq-consumer8803

(1)分别启动eureka-server7001、cloud-stream-rabbitmq-provider8801、cloud-stream-rabbitmq-consumer8802、cloud-stream-rabbitmq-consumer8803

效果图：

(2)启动RabbitMQ

效果图：

6、查看RabbitMQ是否正常运行

在浏览器输入http://localhost:15672/进入RabbitMQ的可视化界面，然后登录进去（默认账号密码guest/guest）

​​

效果图：

​​

7、在浏览器地址栏输入 http://localhost:8801/sendMessage接口，然后按回车发起请求

效果图：

​

分别查看cloud-stream-rabbitmq-provider8801、cloud-stream-rabbitmq-consumer8802、cloud-stream-rabbitmq-consumer8803的控制台输出，发现8801生产者只发送了一条消息，但这条消息分别被8802和8803消费了，出现了我们在前言里说的重复消费问题

cloud-stream-rabbitmq-provider8801：

​

cloud-stream-rabbitmq-consumer8802：

​

cloud-stream-rabbitmq-consumer8803：

​

8、造成重复消费的原因

不同组是可以重复消费的，因为cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803是处于不同的组，所以可以重复消费

9、分别查看cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803所属的组是什么

(1)登录RabbitMQ Management页面，点进Exchange，然后点进studyExchange

​

(2)点进第一个队列

​

(3)可以看到这个队列所属的组是djyBMHL-QTyaDDmJp-TBvQ

​

(4)点进第一个队列​

(5)可以看到这个队列所属的组是sC3WGnxXRFGQZ8V94jUQog​

综上所示，cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803属于不同的组，所以可以重复消费

10、使用分组解决重复消费问题原理

在Stream中处于同一个group中的多个消费者是竞争关系把微服务应用放置于同一个group中，就能够保证消息只会被其中一个应用消费一次。不同的组是可以消费的，同一个组内会发生竞争关系，只有其中一个可以消费。

11、设置自定义配置分组

(1)修改cloud-stream-rabbitmq-consumer8802的applidation.yml配置文件，给cloud-stream-rabbitmq-consumer8802分配组名为KenA的组

server:
  port: 8802

spring:
  application:
    name: cloud-stream-consumer
  cloud:
    stream:
      #在此处配置要绑定的rabbitmq的服务信息
      binders:
        #表示定义的名称，用于于binding整合
        defaultRabbit:
          #消息组件类型，表示用到的组件是rabbit
          type: rabbit
          #设置rabbitmq的相关的环境配置
          environment:
            spring:
              rabbitmq:
                host: localhost
                port: 5672
                username: guest
                password: guest
      #服务的整合处理
      bindings:
        #这个名字是一个通道的名称
        input:
          #表示要使用的Exchange名称定义
          destination: studyExchange
          #设置消息类型，本次为json，文本则设置"text/plain"
          content-type: application/json
          #设置要绑定的消息服务的具体设置
          binder: defaultRabbit
          #分配给组名为kenA的组
          group: KenA

eureka:
  #客户端进行Eureka注册的配置
  client:
    service-url:
      defaultZone: http://localhost:7001/eureka
  instance:
    #设置心跳的时间间隔（默认是30秒)
    lease-renewal-interval-in-seconds: 2
    #如果现在超过了5秒的间隔（默认是90秒)
    lease-expiration-duration-in-seconds: 5
    #在信息列表时显示主机名称
    instance-id: receive-8802.com
    #访问的路径变为IP地址
    prefer-ip-address: true

(2)修改cloud-stream-rabbitmq-consumer8803的applidation.yml配置文件，给cloud-stream-rabbitmq-consumer8803分配组名为KenB的组

server:
  port: 8803

spring:
  application:
    name: cloud-stream-consumer
  cloud:
    stream:
      #在此处配置要绑定的rabbitmq的服务信息
      binders:
        #表示定义的名称，用于于binding整合
        defaultRabbit:
          #消息组件类型，表示用到的组件是rabbit
          type: rabbit
          #设置rabbitmq的相关的环境配置
          environment:
            spring:
              rabbitmq:
                host: localhost
                port: 5672
                username: guest
                password: guest
      #服务的整合处理
      bindings:
        #这个名字是一个通道的名称
        input:
          #表示要使用的Exchange名称定义
          destination: studyExchange
          #设置消息类型，本次为json，文本则设置"text/plain"
          content-type: application/json
          #设置要绑定的消息服务的具体设置
          binder: defaultRabbit
          #分配给组名为kenB的组
          group: KenB

eureka:
  #客户端进行Eureka注册的配置
  client:
    service-url:
      defaultZone: http://localhost:7001/eureka
  instance:
    #设置心跳的时间间隔（默认是30秒)
    lease-renewal-interval-in-seconds: 2
    #如果现在超过了5秒的间隔（默认是90秒)
    lease-expiration-duration-in-seconds: 5
    #在信息列表时显示主机名称
    instance-id: receive-8803.com
    #访问的路径变为IP地址
    prefer-ip-address: true

(3)重启cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803服务

效果图：

(4)重新点进Exchange，然后点进studyExchange

​

(5)可以看到cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803被分别分配到KenA组和KenB组，这说明我们成功设置自定义配置分组

---

注：如果分组没生效可以尝试使用Maven的compile命令来重新编译项目，然后重启启动项目即可

---

12、使用自定义分组解决重复消费问题

在上述步骤11中我们演示了如何去设置自定义配置分组，而不同的组是可以重复消费的，同一个组内会发生竞争关系，只有其中一个可以消费，所以我们可以通过自定义分组把cloud-stream-rabbitmq-consumer8802和cloud-stream-rabbitmq-consumer8803共同分为KenA组，使其只有一个消费者能消费消息

(1)修改cloud-stream-rabbitmq-consumer8803的applidation.yml配置文件，给cloud-stream-rabbitmq-consumer8803分配组名为KenA的组（因为在上述步骤11中我们给8802设置了KenA组，所以这里只用修改8803的分组即可）

server:
  port: 8803

spring:
  application:
    name: cloud-stream-consumer
  cloud:
    stream:
      #在此处配置要绑定的rabbitmq的服务信息
      binders:
        #表示定义的名称，用于于binding整合
        defaultRabbit:
          #消息组件类型，表示用到的组件是rabbit
          type: rabbit
          #设置rabbitmq的相关的环境配置
          environment:
            spring:
              rabbitmq:
                host: localhost
                port: 5672
                username: guest
                password: guest
      #服务的整合处理
      bindings:
        #这个名字是一个通道的名称
        input:
          #表示要使用的Exchange名称定义
          destination: studyExchange
          #设置消息类型，本次为json，文本则设置"text/plain"
          content-type: application/json
          #设置要绑定的消息服务的具体设置
          binder: defaultRabbit
          #分配给组名为kenB的组
          group: KenA

eureka:
  #客户端进行Eureka注册的配置
  client:
    service-url:
      defaultZone: http://localhost:7001/eureka
  instance:
    #设置心跳的时间间隔（默认是30秒)
    lease-renewal-interval-in-seconds: 2
    #如果现在超过了5秒的间隔（默认是90秒)
    lease-expiration-duration-in-seconds: 5
    #在信息列表时显示主机名称
    instance-id: receive-8803.com
    #访问的路径变为IP地址
    prefer-ip-address: true

(2)重启cloud-stream-rabbitmq-consumer8803服务

效果图：

(3)在浏览器地址栏输入 http://localhost:8801/sendMessage接口，然后按2次回车发起2次请求

效果图：

​

分别查看cloud-stream-rabbitmq-provider8801、cloud-stream-rabbitmq-consumer8802、cloud-stream-rabbitmq-consumer8803的控制台输出，发现8801生产者发送了2条消息的情况下，8802和8803分别消费了1条消息，一开始说到的重复消费问题不再出现

cloud-stream-rabbitmq-provider8801：

​

cloud-stream-rabbitmq-consumer8802：

cloud-stream-rabbitmq-consumer8803：