Redis----取代RabbitMq 和 Kafka的解决方案

背景

已知rabbitmq和kafka作为消息中间件来给程序之间增加异步消息传递功能,这两个中间件都是专业的,功能也很强,但是有的时候过于复杂,对于只有一组消费者的消息队列,使用Redis 就可以轻松搞定。

异步消息队列

读者可以思考一下他的几种数据结构哪种更适合,string,hash,set,zset,list

是的很明显list',使用rpush/lpush进队列,rpop/lpop出队列

队列空了怎么办

消费者重复快速从队列中消费,那么队列很快就会空,那么就会重复pop操作。浪费生命的空轮询,拉高无用的能耗,通常的解决方案就是让消费线程睡一会,一般1s就够了。

但是又有新问题,如果消费者数量过多,睡眠时间综合起来就太多了,缩短睡眠时间?但还是有别的方案,阻塞读

blpop brpop b前缀是blocking 阻塞

阻塞读是队列为空时会立刻进入休眠状态,一旦数据来了就立即唤醒,基本没有延迟。

看起来是不是完美无缺,但是如果断开链接呢?

线程一直阻塞的话,Redis链接闲置的话,服务器会关闭它,并抛出异常。

延时队列的实现

redis中一种特殊的数据结构,zset,消息序列化成一个字符串作为zset的value,消息的到期时间作为他们的score,用多个线程轮询zset获取到期的任务处理。(多个线程保证可用,一个线程挂了还有其他的)

相关推荐
lazy H几秒前
不同的消息队列有什么区别?Kafka、RabbitMQ、RocketMQ、Pulsar、ActiveMQ 选型对比
后端·中间件·kafka·rabbitmq·rocketmq
老鼠拧刀满街找猫1 小时前
Windows Docker部署Redis一主两从+哨兵完整实战(含静态IP方案)
windows·redis·docker
零域码客1 小时前
Redis 双刃剑:缓存与分布式锁的本质区别
redis·分布式·缓存·并发控制·后端架构
Escalating_xu1 小时前
【Linux】线程概念与控制:从地址空间、LWP 到 pthread_create、join、detach 与 NPTL
java·linux·redis
InfinitePlus3 小时前
docker redis部署
redis·docker·容器
会编程的土豆4 小时前
12306 春运抢票:数据一致性怎么保证
redis·消息队列·go·高并发
ltl12 小时前
Redis 紧凑编码:listpack、quicklist 与 intset
redis
野生技术架构师1 天前
Redis 和 MySQL 如何保证数据一致性?先更新数据库还是先删缓存,延迟双删、MQ、Canal 一次讲透
数据库·redis·缓存
Devin~Y1 天前
从内容社区到AI智能客服:Spring Boot + Spring Cloud + Spring AI 全栈实战面试拆解
java·spring boot·redis·elasticsearch·spring cloud·kafka·mybatis
2602_959960921 天前
电商大厂Java面试:从Spring Boot、JPA、微服务到Redis、Kafka、Spring Security与监控,谢飞机的爆笑三轮问答
java·jvm·spring boot·redis·面试题