RabbitMQ多角度可靠性分析/基于Java代码深度解析

上一篇我介绍了RabbitMQ的基本交换机以及队列,不了解可以再回顾一下。

那么这就带来一个问题,我们在程序中添加一个中间件,把我们的消息依托给MQ,那么我们如何保证我们的消息在这个过程不会丢失。保证它的的可靠性,目前主流从三个角度保证:生产者可靠性,MQ可靠性,消费者可靠性。

生产者可靠性:

所谓生产者可靠性就是我们如何保证将我们的消息从生产者将消息发送到队列或者消息的可靠性

1. 重试机制

针对网络异常,连接中断,卡顿的自动重发。(萌芽阶段,与客户端的连接,还没有到交换机/d队列)

XML 复制代码
spring:
  rabbitmq:
       /....
    connection-timeout: 1s 
    template:
      retry:
        initial-interval: 1000ms
        multiplier: 2
        max-attempts: 3

参数讲解

|-------------------|-------------------------------------------------------------------------------|
| connetion-timeout | 连接时长,如果在这个时长内依旧没有连接成功就认为连接失败 |
| initial-interval | 等待时长,第一次连接失败后多久重新重试 |
| mutiplier | 等待倍数,结合initial-interval,计算下次等待时长,initial-interval=initial-interval*mutiplier |
| max-attempts | 最大重连次数 |

重连机制似乎看起来我们每个程序都需要配置一下,但实际上我们真是企业还是要慎重,因为我们的不断重连是阻塞式的。所以说在追求极度的高并发情况下,需要慎重使用,如果必须使用,我们应该优化参数值,比如连接次数,连接时长等参数值调整。

2. 回调机制

确认消息是否到投递到交换机以及是都正确路由(成长阶段,到达交换机/队列)

Confirm Callback策略

确认消息是否成功到达交换机

XML 复制代码
spring:
  rabbitmq:
    /...
    publisher-confirm-type: correlate/none/simple

参数解释

|------------------------|------------|----------------------------------|
| publisher-confirm-type | | Spring AMQP 启用监听RabbitMQ 退回消息的机制 |
| | none | 关闭confirm机制 |
| | simple | 同步阻塞等待MQ回执消息 |
| | correlated | MQ异步回调方式返回回执消息 |

java 复制代码
//创建关联数据
CorrelationData correlationData = new CorrelationData(UUID.randomUUID().toString());
// 使用Lambda设置确认回调
rabbitTemplate.setMandatory(true);
rabbitTemplate.setConfirmCallback((correlationData1, ack, cause) -> {
if (ack) {
   System.out.println("[消息确认] 成功 - ID: " + correlationData.getId());
} else {
   System.out.println("[消息确认] 失败 - ID: " + correlationData.getId() + ", 原因: " + cause);
}
});

Return Callback策略

确认消息是否被成功路由(异步等待回执消息)

XML 复制代码
spring:
  rabbitmq:
       /...
    publisher-returns: true
java 复制代码
rabbitTemplate.setMandatory(true);
rabbitTemplate.setReturnsCallback(returnedMessage -> {
    //对于需要的接口泛型 接受一个参数 在{}体内写方法体
    System.err.println("消息投递失败");
    //...处理逻辑/
 });

MQ可靠性:

交换机持久化

队列持久化

消息持久化

在spring-amqp中消息默认持久化

发送非持久化消息

java 复制代码
Message message = MessageBuilder.withBody("hello".getBytes(StandardCharsets.UTF_8))
                .setDeliveryMode(MessageDeliveryMode.NON_PERSISTENT) //PERSISTENT
                .build();

消息的持久化影响了我的MQ的吞吐量,同时保证了消息的可靠性。为了平衡可靠性性和性能,

RabbitMQ从3.6版本引入了惰性队列(lazy queue)。

让我们看一下为什么持久化是怎么影响性能的

如果我们的消息是持久化的,消息依旧会先存放在内存中,当我们的信息量达到一定程度后,服务器page out将消息扇出到磁盘中。这个时刻队列暂时无法接受消息,处于阻塞状态。

为了避免从内存写入磁盘这段性能损失,lazy queue先将消息写入磁盘,然后根据消费者的读取速速,将消息扇出到内存中(最多2048条)。

RabbitMQ3.8版本及以下,如若使用多队列,需要手动配置。

RabbitMQ3.12 版本开始,所有队列都采用惰性队列,无法使用传统队列模式

消费者可靠性:

相关推荐
麦兜*1 小时前
Spring Boot 整合量子密钥分发(QKD)实验方案
java·jvm·spring boot·后端·spring·spring cloud·maven
码破苍穹ovo2 小时前
堆----1.数组中的第K个最大元素
java·数据结构·算法·排序算法
2301_793086872 小时前
JVM 01 运行区域
java·开发语言
崎岖Qiu2 小时前
【JVM篇13】:兼顾吞吐量和低停顿的G1垃圾回收器
java·jvm·后端·面试
久念祈3 小时前
C++ - 仿 RabbitMQ 实现消息队列--服务端核心模块实现(五)
java·rabbitmq·java-rabbitmq
一只叫煤球的猫5 小时前
被架构师怼了三次,小明终于懂了接口幂等设计
后端·spring·性能优化
超级晒盐人6 小时前
用落霞归雁的思维框架推导少林寺用什么数据库?
java·python·系统架构·学习方法·教育电商
岁忧6 小时前
(LeetCode 面试经典 150 题) 138. 随机链表的复制 (哈希表)
java·c++·leetcode·链表·面试·go
鹦鹉0076 小时前
IO流中的字节流
java·开发语言·后端
你我约定有三6 小时前
分布式微服务--Nacos作为配置中心(二)
java·分布式·spring cloud·微服务·架构·wpf·负载均衡