RabbitMQ多角度可靠性分析/基于Java代码深度解析

上一篇我介绍了RabbitMQ的基本交换机以及队列,不了解可以再回顾一下。

那么这就带来一个问题,我们在程序中添加一个中间件,把我们的消息依托给MQ,那么我们如何保证我们的消息在这个过程不会丢失。保证它的的可靠性,目前主流从三个角度保证:生产者可靠性,MQ可靠性,消费者可靠性。

生产者可靠性:

所谓生产者可靠性就是我们如何保证将我们的消息从生产者将消息发送到队列或者消息的可靠性

1. 重试机制

针对网络异常,连接中断,卡顿的自动重发。(萌芽阶段,与客户端的连接,还没有到交换机/d队列)

XML 复制代码
spring:
  rabbitmq:
       /....
    connection-timeout: 1s 
    template:
      retry:
        initial-interval: 1000ms
        multiplier: 2
        max-attempts: 3

参数讲解

|-------------------|-------------------------------------------------------------------------------|
| connetion-timeout | 连接时长,如果在这个时长内依旧没有连接成功就认为连接失败 |
| initial-interval | 等待时长,第一次连接失败后多久重新重试 |
| mutiplier | 等待倍数,结合initial-interval,计算下次等待时长,initial-interval=initial-interval*mutiplier |
| max-attempts | 最大重连次数 |

重连机制似乎看起来我们每个程序都需要配置一下,但实际上我们真是企业还是要慎重,因为我们的不断重连是阻塞式的。所以说在追求极度的高并发情况下,需要慎重使用,如果必须使用,我们应该优化参数值,比如连接次数,连接时长等参数值调整。

2. 回调机制

确认消息是否到投递到交换机以及是都正确路由(成长阶段,到达交换机/队列)

Confirm Callback策略

确认消息是否成功到达交换机

XML 复制代码
spring:
  rabbitmq:
    /...
    publisher-confirm-type: correlate/none/simple

参数解释

|------------------------|------------|----------------------------------|
| publisher-confirm-type | | Spring AMQP 启用监听RabbitMQ 退回消息的机制 |
| | none | 关闭confirm机制 |
| | simple | 同步阻塞等待MQ回执消息 |
| | correlated | MQ异步回调方式返回回执消息 |

java 复制代码
//创建关联数据
CorrelationData correlationData = new CorrelationData(UUID.randomUUID().toString());
// 使用Lambda设置确认回调
rabbitTemplate.setMandatory(true);
rabbitTemplate.setConfirmCallback((correlationData1, ack, cause) -> {
if (ack) {
   System.out.println("[消息确认] 成功 - ID: " + correlationData.getId());
} else {
   System.out.println("[消息确认] 失败 - ID: " + correlationData.getId() + ", 原因: " + cause);
}
});

Return Callback策略

确认消息是否被成功路由(异步等待回执消息)

XML 复制代码
spring:
  rabbitmq:
       /...
    publisher-returns: true
java 复制代码
rabbitTemplate.setMandatory(true);
rabbitTemplate.setReturnsCallback(returnedMessage -> {
    //对于需要的接口泛型 接受一个参数 在{}体内写方法体
    System.err.println("消息投递失败");
    //...处理逻辑/
 });

MQ可靠性:

交换机持久化

队列持久化

消息持久化

在spring-amqp中消息默认持久化

发送非持久化消息

java 复制代码
Message message = MessageBuilder.withBody("hello".getBytes(StandardCharsets.UTF_8))
                .setDeliveryMode(MessageDeliveryMode.NON_PERSISTENT) //PERSISTENT
                .build();

消息的持久化影响了我的MQ的吞吐量,同时保证了消息的可靠性。为了平衡可靠性性和性能,

RabbitMQ从3.6版本引入了惰性队列(lazy queue)。

让我们看一下为什么持久化是怎么影响性能的

如果我们的消息是持久化的,消息依旧会先存放在内存中,当我们的信息量达到一定程度后,服务器page out将消息扇出到磁盘中。这个时刻队列暂时无法接受消息,处于阻塞状态。

为了避免从内存写入磁盘这段性能损失,lazy queue先将消息写入磁盘,然后根据消费者的读取速速,将消息扇出到内存中(最多2048条)。

RabbitMQ3.8版本及以下,如若使用多队列,需要手动配置。

RabbitMQ3.12 版本开始,所有队列都采用惰性队列,无法使用传统队列模式

消费者可靠性:

相关推荐
Small black human11 分钟前
Spring-MyBatis的配置
java·spring·mybatis
Niloofar2 小时前
SpringBootWeb请求响应
java·maven
王有品2 小时前
Spring MVC 会话管理实践教程:HttpSession 深入应用
java·spring·mvc
武子康2 小时前
Java-49 深入浅出 Tomcat 手写 Tomcat 实现【02】HttpServlet Request RequestProcessor
java·开发语言·后端·学习·spring cloud·tomcat
若疆赤云online2 小时前
Minio使用https自签证书
java·网络协议·https
bulucc2 小时前
IntelliJ IDEA 安装及java环境搭建
java·ide·intellij-idea
晴空月明3 小时前
Java集合框架性能特征与使用场景深度解析
java
狮子也疯狂3 小时前
基于Spring Boot的宿舍管理系统设计与实现
java·spring boot·后端
药9553 小时前
数据结构 4 (栈和队列)
java·开发语言·数据结构
alex88863 小时前
介绍一款免费MES、开源MES系统、MES源码
java·5g·开源·产品运营·软件构建·制造·源代码管理