rocketmq

晚安code6 天前
redis·rocketmq
RocketMQ 顺序消费实战:批量接口加 Redis Pipeline同步数据大家好,我是晚安code。用户信息同步:用户改昵称、换头像,变更要实时同步给下游的搜索和排行榜。量一上来,三个问题全冒头——查用户信息慢到两秒起,消息消费出来顺序乱得离谱,改完的头像刚写进缓存又被旧数据盖回去。最后是 RocketMQ 顺序消费 + 批量接口 + Redis Pipeline 三件套把整条链路救活的。这套组合拳怎么打、坑在哪里,下面一次讲透。点个收藏,我们开始~
风样滴男人哟8 天前
大数据·spark·rocketmq
spark streaming消费rocketmq的几种方式在大数据实时处理领域,Apache Spark Streaming 和 Apache RocketMQ 都是非常流行的框架。Spark Streaming 提供了高吞吐、容错的流处理能力,而 RocketMQ 则是一个高性能、低延迟的分布式消息中间件。将两者结合,可以实现高效的实时数据管道。本文将从基础概念讲起,逐步深入,介绍 Spark Streaming 消费 RocketMQ 消息的几种常见方式,并附带完整的代码示例。## 1. 基础概念:什么是 Spark Streaming 和 RocketMQ
晚安code7 天前
redis·rocketmq
RocketMQ 延迟消息实战:延迟双删策略解决 Redis 缓存一致性大家好,我是晚安code。更新完数据库,缓存里却还躺着旧数据——这种脏数据我太熟了。上周排查一个订单价格对不上的线上问题,最后定位到就是「先删缓存再写库」在并发下翻了车。
IT界的老黄牛8 天前
java·rocketmq·redisson·令牌桶·削峰·分布式限流
限流命中后该怎么办:直接丢、阻塞等待、延迟重投三种姿势的取舍📝 摘要:下游三方有 QPS 配额,限流命中后到底怎么办?本文对比直接丢、阻塞等待、延迟重投三种姿势的取舍,落地基于 Redisson 全局令牌桶 RRateLimiter,命中即入延迟队列削峰重投,用退避加随机抖动破解惊群,重试耗尽兜底加 metrics 告警,并给出限流器异常降级放行、应用内环形 hash 采集单秒峰值 QPS 等踩坑经验。
摇滚侠9 天前
笔记·rocketmq
《RocketMQ 官网》阅读笔记 RocketMQ 普通消息 延时消息 顺序消息 事务消息普通消息通常用于微服务解耦、 数据集成和事件驱动场景。这些场景大多对消息处理的时效性或顺序性要求较低,主要关注可靠的消息传输通道。
阿里云云原生9 天前
rocketmq
RocketMQ 高可用创新论文入选 ACM FSE:无需复制业务数据,实现有状态服务秒级接管作者:金融通近日,阿里云消息团队发表的 Apache RocketMQ 高可用创新论文 《无业务数据复制的故障接管:面向有状态服务的协议级安全接管》(英文原名:Replication-Free Failover: Protocol-Fenced Takeover for Stateful Services)入选 FSE 2026 Industry Papers Track。
重庆小透明9 天前
java·学习·spring·kafka·rabbitmq·rocketmq
带你从不同视角了解三大MQ首先我提一点我自己的学习心得,我通过最近学习项目,我觉得我们在学习新技术的时候,要始终记得有一个前提:技术的诞生是为了解决问题。
阿里云云原生9 天前
apache·rocketmq
RocketMQ-A2A 创新论文入选 ACM FSE,定义 AI Agent 可靠协作新范式作者:张硕近日,由阿里云消息团队发表的 Apache RocketMQ 创新论文 《面向大规模多智能体协作的会话级可重放事件流》(英文原名:RocketMQ-A2A: Reliable Session-Level Replayable Event Streams for Large-Scale Multi-Agent Collaboration)入选 FSE 2026 Industry Papers Track。
依晨照旧9 天前
后端·rocketmq
限流命中后该怎么办:直接丢、阻塞等待、延迟重投三种姿势的取舍📝 摘要:下游三方有 QPS 配额,限流命中后到底怎么办?本文对比直接丢、阻塞等待、延迟重投三种姿势的取舍,落地基于 Redisson 全局令牌桶 RRateLimiter,命中即入延迟队列削峰重投,用退避加随机抖动破解惊群,重试耗尽兜底加 metrics 告警,并给出限流器异常降级放行、应用内环形 hash 采集单秒峰值 QPS 等踩坑经验。
摇滚侠11 天前
笔记·rocketmq
《RocketMQ 官网》阅读笔记 RocketMQ 订阅 (Subscription)订阅是 Apache RocketMQ 中消费者获取和处理消息的规则与状态设置。 订阅由消费者组动态注册到服务端(Broker)。消息会根据订阅中定义的过滤规则进行匹配和消费。 通过配置订阅,您可以控制以下消息行为:
摇滚侠11 天前
笔记·rocketmq
《RocketMQ 官网》阅读笔记 RocketMQ 消费者组(Consumer Group)消费者(Consumer)消费者组是 Apache RocketMQ 中的一个负载均衡分组,包含使用相同消费行为的消费者。 与作为运行实体的消费者不同,消费者组是逻辑资源。Apache RocketMQ 在一个消费者组中初始化多个消费者,以实现消费性能的扩展和高可用灾难恢复。 在消费者组中,消费者根据组内定义的消费行为和负载均衡策略消费消息。以下部分描述了已定义的消费行为。
摇滚侠12 天前
笔记·rocketmq
《RocketMQ 官网》阅读笔记 RocketMQ 消息队列 MessageQueue 消息 Messagege队列是 Apache RocketMQ 中用于存储和传输消息的容器。队列是 Apache RocketMQ 消息存储的最小单位。Apache RocketMQ 中的一个主题由多个队列组成。 队列具有以下优势:
Bug收容所12 天前
java·spring boot·redis·mysql·spring·rocketmq
12305项目学习day5最近在学习 12306 分布式票务项目时,我重点看了三个比较有代表性的工程化设计:这三个点不属于某一个具体业务功能,但它们对项目的稳定性、可维护性和安全性影响很大。学习完之后,我把自己的理解整理成这篇复盘。文章会围绕三个问题展开:
啊啊啊迈 旋棍13 天前
spring boot·rocketmq·java-rocketmq
生态整合与实战篇:Spring Boot 整合 RocketMQ 完全指南大家好,我是你们的老朋友——一个喜欢用代码说话的技术博主。今天我们要聊的是如何将 Spring Boot 和 RocketMQ 这对“黄金搭档”整合起来,打造一个高效、可靠的消息驱动系统。RocketMQ 作为分布式消息中间件,在微服务架构中扮演着“数据高速公路”的角色,而 Spring Boot 则以其简洁的配置和强大的生态,让开发者能快速上手。本文将从基础概念到实战代码,带你一步步掌握整合技巧。## 为什么选择 RocketMQ?在开始之前,我们先简单聊聊 RocketMQ 的优势。相比 Rabbit
坚持的小马14 天前
java·rocketmq·java-rocketmq
Rocketmq搭建操作步骤1.broker-a.properties:双主中的一个master的配置文件2.broker-a-s.properties:双从中的一个slave的配置文件
Ai拆代码的曹操14 天前
后端·rocketmq
RocketMQ 消息堆积排查实战:从 20 个消费者线程卡死到 rebalance 死亡螺旋场景:业务端到端耗时从 200ms 涨到 5s,消息堆积 50 万条。业务方怀疑生产者慢,链路追踪发现消费端才是根因——20 个消费者线程全部卡在同步 DB 写入上,形成 rebalance 死亡螺旋 路径:消费 lag 监控 → 消费者线程池 → 消费者源码 → 业务代码 → 修复方案
码农学院14 天前
spring boot·rocketmq·java-rocketmq
Spring Boot RocketMQ构建电商零售高并发订单处理系统电商零售行业在大促期间面临极端的并发挑战。2025年双十一峰值QPS超过5000万,订单创建速度达到每秒58.3万笔。项目团队在为某电商零售企业重构订单系统时,采用Spring Boot+Redis+RocketMQ技术栈,通过消息队列削峰填谷和分布式事务保障,实现了日均3000万订单的稳定处理,大促期间系统零宕机,订单处理延迟控制在100ms以内。
阿里云云原生16 天前
rocketmq
会话即 Topic:RocketMQ LiteTopic 如何支撑 AI Agent 实现分钟级异步协作与精细化限流?本文转载自「老周聊架构」,作者:RiemannChow,已获授权转载。传统微服务:一个请求 100ms 返回,消息队列做削峰填谷。AI 应用:一个请求跑 30 分钟还没回来,中间断网了,重连后上下文全丢了,GPU 白烧了 30 分钟的钱。——这就是 RocketMQ 为什么要做 AI 升级的原因。
Ethan010719 天前
rocketmq
RocketMQ三高-高性能、高并发、高可靠RocketMQ 高性能的本质,是它把存储引擎做成了"以磁盘为持久化层、以 PageCache 为性能层"的架构,让磁盘消息也能接近内存的访问速度。下面分几个关键点讲清楚"体现在哪"和"为什么"。