celery 结合 rabbitmq 使用时,celery 消费者执行时间太久发送 ack 消息失败

celery 5.3.6 结合 rabbitmq 使用时,celery 消费者执行时间超过 30 分钟,执行完成后向 rabbitmq 发起确认消费完成的 ack 消息时,提示 Connection reset by peer,rabbitmq 客户端连接已经断开了,这会导致同一个执行时间比较久的任务不断重复消费而且每次都无法成功发送 ack 消息。

这种情况下,添加对执行结果的 redis 缓存,每次执行消费任务时先检查结果是否已经存在(由唯一键来确定是同一个任务),每次执行完消费任务将结果添加进 redis 缓存再发送 ack 消息,这样来避开同一个执行时间比较久的任务不断重复消费。

相关推荐
卷无止境7 分钟前
Python生成器与惰性求值:从yield说起的一场"暂停魔法"
后端·python
卷无止境16 分钟前
从一个装饰器说起:拆解 Python 的 @property
后端·python
农村小镇哥18 分钟前
python操作配置文件ini
开发语言·python
love530love9 小时前
OpenClaw Windows Companion 桌面客户端 连接 LM Studio 完整配置指南
人工智能·windows·python·openclaw
cui_ruicheng11 小时前
Python从入门到实战(十六):多进程编程
开发语言·python
_Jimmy_12 小时前
FastAPI + SQLAlchemy全局事务管理
python·fastapi
用户83562907805112 小时前
如何使用 Python 在 Excel 中添加、编辑和删除超链接
后端·python
AC赳赳老秦14 小时前
企业工商公开信息采集分析:OpenClaw 批量查询企业工商信息,生成企业画像报告
大数据·开发语言·python·自动化·php·deepseek·openclaw
FoldWinCard15 小时前
D6 Python 基础语法 --- 保留关键字
开发语言·python
暮暮祈安15 小时前
Celery 新手入门指南
java·数据库·python·flask·httpx