【退役之重学Java】如何开发一个消息队列中间件

一、考虑可扩展性

分析

  1. 消息队列中的消息数量是不确定的,有时一两万个,出现流量高峰甚至消息积压的时候,就会有上百万、千万的消息在队列中。
  2. 所以,为了增加系统的稳定性,消息队列需要具备快速扩容的能力

实现

  1. 采用分布式系统设计,将消息队列的每一个topic 进行分区,每一个分区放一个机器
  2. 需要扩容,就增加分区的数量,进行数据迁移,这样就可以进行快速扩容了

二、考虑持久化

分析

  1. 要保证机器重启或宕机时,消息队列的数据不丢失,就需要实现持久化

实现

  1. 消息队列的持久化可以通过两个组件实现:队列索引(queue index)和消息存储(message store)。队列索引负责维护消息在队列中的位置以及消息是否已被传递和确认。每个队列都有一个队列索引。消息存储是用于存储消息的键值存储,在每个虚拟主机(vhost)中的所有队列之间共享。消息可以直接存储在队列索引中,也可以写入消息存储。
相关推荐
小小鱼儿飞2 分钟前
QT Quick QML项目音乐播放器16----无边框窗口拖动、小窗播放、隐藏系统托盘
开发语言·qt
-指短琴长-6 分钟前
Qt的下载和安装【Windows】
开发语言·windows·qt
不会编程的小寒7 分钟前
C++ this指针、常函数、内联函数
java·开发语言
小冯的编程学习之路12 分钟前
【C++】:C++基于微服务的即时通讯系统(2)
开发语言·c++·微服务
观望过往26 分钟前
Spring Boot 集成 EMQ X 4.0 完整技术指南
java·spring boot·后端·emqx
许长安27 分钟前
C/C++中的extern关键字详解
c语言·开发语言·c++·经验分享·笔记
ml魔力信息35 分钟前
一枚指纹,开启工业IoT设备安全与权限分级实践
java·物联网·安全
会飞的小蛮猪1 小时前
SkyWalking运维之路(Java探针接入)
java·运维·经验分享·容器·skywalking
通域1 小时前
解决启动IDEA后CPU 及内存占用过高配置调整
java·ide·intellij-idea
earthzhang20211 小时前
【1039】判断数正负
开发语言·数据结构·c++·算法·青少年编程