Redis----取代RabbitMq 和 Kafka的解决方案

背景

已知rabbitmq和kafka作为消息中间件来给程序之间增加异步消息传递功能,这两个中间件都是专业的,功能也很强,但是有的时候过于复杂,对于只有一组消费者的消息队列,使用Redis 就可以轻松搞定。

异步消息队列

读者可以思考一下他的几种数据结构哪种更适合,string,hash,set,zset,list

是的很明显list',使用rpush/lpush进队列,rpop/lpop出队列

队列空了怎么办

消费者重复快速从队列中消费,那么队列很快就会空,那么就会重复pop操作。浪费生命的空轮询,拉高无用的能耗,通常的解决方案就是让消费线程睡一会,一般1s就够了。

但是又有新问题,如果消费者数量过多,睡眠时间综合起来就太多了,缩短睡眠时间?但还是有别的方案,阻塞读

blpop brpop b前缀是blocking 阻塞

阻塞读是队列为空时会立刻进入休眠状态,一旦数据来了就立即唤醒,基本没有延迟。

看起来是不是完美无缺,但是如果断开链接呢?

线程一直阻塞的话,Redis链接闲置的话,服务器会关闭它,并抛出异常。

延时队列的实现

redis中一种特殊的数据结构,zset,消息序列化成一个字符串作为zset的value,消息的到期时间作为他们的score,用多个线程轮询zset获取到期的任务处理。(多个线程保证可用,一个线程挂了还有其他的)

相关推荐
我不会起名字32213 小时前
Redis 从 0 到 1(九):主库宕机 30 秒自动切主——1 主 2 从 3 哨兵 + Go 客户端
redis·docker·sentinel·高可用·哨兵
我不会起名字32217 小时前
Kafka 分区数到底设几个:吞吐量、顺序性与 rebalance 代价的取舍
kafka·消息队列·调优·分区
毕业设计70320 小时前
(免费领源码)SSM董家湾线上点餐系统04682- java、PHP、python、C#、小程序、大数据、单片机、网络工程等)
java·redis·mysql·tomcat·maven·mybatis·ssm
用户094248568031 天前
第1章:Redis 术语全景与单线程工作原理
redis·快应用·源码阅读
hflmwl81 天前
RedisDesktopManager安装包中文版官方下载,redis可视化客户端工具下载
数据库·redis·缓存·可视化客户端工具
用户84913717547161 天前
订单超时未支付自动取消实现方案 | 三种方案详解
redis·面试·rabbitmq
easyboot1 天前
Memurai Windows下的redis
redis
starzy19901 天前
深度拆解 Kafka 源码:Producer 构造器装配了哪些核心组件
分布式·kafka
我不会起名字3221 天前
Go 写 Kafka 消费者:sarama 的 3 个坑与优雅退出写法
kafka·消息队列·go·sarama
我不会起名字3221 天前
Redis RDB 落盘时的 fork 停顿:COW 机制与 3 个降低影响的配置
redis·持久化·fork·cow·rdb