【退役之重学Java】如何开发一个消息队列中间件

一、考虑可扩展性

分析

  1. 消息队列中的消息数量是不确定的,有时一两万个,出现流量高峰甚至消息积压的时候,就会有上百万、千万的消息在队列中。
  2. 所以,为了增加系统的稳定性,消息队列需要具备快速扩容的能力

实现

  1. 采用分布式系统设计,将消息队列的每一个topic 进行分区,每一个分区放一个机器
  2. 需要扩容,就增加分区的数量,进行数据迁移,这样就可以进行快速扩容了

二、考虑持久化

分析

  1. 要保证机器重启或宕机时,消息队列的数据不丢失,就需要实现持久化

实现

  1. 消息队列的持久化可以通过两个组件实现:队列索引(queue index)和消息存储(message store)。队列索引负责维护消息在队列中的位置以及消息是否已被传递和确认。每个队列都有一个队列索引。消息存储是用于存储消息的键值存储,在每个虚拟主机(vhost)中的所有队列之间共享。消息可以直接存储在队列索引中,也可以写入消息存储。
相关推荐
yong9990几秒前
MATLAB自回归预测模型实现方案
开发语言·matlab·回归
浪客川2 分钟前
【百例RUST - 004】函数使用
服务器·开发语言·rust
程序猿(雷霆之王)2 分钟前
C++11——线程库
开发语言·c++
天天睡大觉3 分钟前
Python学习1
开发语言·python·学习
2501_941805314 分钟前
在阿姆斯特丹智能港口场景中构建集装箱实时调度与高并发物流数据分析平台的工程设计实践经验分享
java·大数据·算法
小许学java5 分钟前
网络原理-HTTP/HTTPS
java·网络·http·https
9稳6 分钟前
基于PLC的垃圾车自动收集装置控制系统设计
开发语言·网络·数据库·嵌入式硬件·plc
panamera129 分钟前
C++ 中 static 关键字
java·开发语言·c++
涂山小楼10 分钟前
线程join()方法的深度理解
java·前端·算法