【退役之重学Java】如何开发一个消息队列中间件

一、考虑可扩展性

分析

  1. 消息队列中的消息数量是不确定的,有时一两万个,出现流量高峰甚至消息积压的时候,就会有上百万、千万的消息在队列中。
  2. 所以,为了增加系统的稳定性,消息队列需要具备快速扩容的能力

实现

  1. 采用分布式系统设计,将消息队列的每一个topic 进行分区,每一个分区放一个机器
  2. 需要扩容,就增加分区的数量,进行数据迁移,这样就可以进行快速扩容了

二、考虑持久化

分析

  1. 要保证机器重启或宕机时,消息队列的数据不丢失,就需要实现持久化

实现

  1. 消息队列的持久化可以通过两个组件实现:队列索引(queue index)和消息存储(message store)。队列索引负责维护消息在队列中的位置以及消息是否已被传递和确认。每个队列都有一个队列索引。消息存储是用于存储消息的键值存储,在每个虚拟主机(vhost)中的所有队列之间共享。消息可以直接存储在队列索引中,也可以写入消息存储。
相关推荐
一只程序熊2 分钟前
vite-cool-unix-ctx] Unexpected token l in JSON at position 0
java·服务器·前端
晨晖27 分钟前
idea2017的下载,破解及使用
java·ide·intellij-idea
denggun123459 分钟前
结构化并发(Structured Concurrency)
开发语言·ios·swift
OKkankan10 分钟前
红黑树的原理及实现
开发语言·数据结构·c++·算法
摇滚侠16 分钟前
Java 项目教程《黑马商城-MQ 篇》,分布式架构项目,从开发到部署
java·分布式·架构
Bert.Cai20 分钟前
Python time.sleep函数作用
开发语言·python
Rsun0455120 分钟前
文件类型后缀汇总
java
小江的记录本36 分钟前
【Spring Boot—— .yml(YAML)】Spring Boot中.yml文件的基础语法、高级特性、实践技巧
xml·java·spring boot·后端·spring·spring cloud·架构
I_LPL40 分钟前
day52 代码随想录算法训练营 图论专题6
java·数据结构·算法·图论
lxl13071 小时前
C++算法(11)字符串
开发语言·c++·算法