架构师方案-数据库事务和消息的一致性方案

前言:

在传统的数据库应用中,数据库事务与消息的发送是独立的两个操作,如果数据库事务因为某种原因失败了,消息可能已经被发送出去了,这就导致了数据的不一致性。

方案1:下游服务过滤异常消息

在第3步中,如果发现分发的消息的业务唯一id在数据库不存在,就不执行业务操作

注意:这个并没有解决数据库事务和消息的一致性,只是从业务影响上,忽视程序异常(鸵鸟政策)

方案2:数据库事务提交之后,通过发布/订阅模式将消息发送给消息队列

arduino 复制代码
    private final ApplicationEventPublisher applicationEventPublisher;
    /**
     * 保存单据、并发送消息
     */
    @Transactional(rollbackFor = Exception.class)
    public void saveOrderAndPushMQ() {
        //业务省略
        expectedPayBillRepository.save(expectedPayBill);
        //这里发送事件里的方法并不是立刻执行的
        applicationEventPublisher.publishEvent(new BusinessTaskEvent("发送BusinessTask消息", expectedPayBill));
    }
scala 复制代码
public class BusinessTaskEvent extends ApplicationEvent {

    private static final long serialVersionUID = -6206752641309458207L;
    public BusinessTask getBusinessTask() {
        return businessTask;
    }

    private ExpectedPayBill expectedPayBill;

    public BusinessTaskEvent(Object source, ExpectedPayBill expectedPayBill) {
        super(source);
        this.expectedPayBill = expectedPayBill;
    }
}

真正发送事件

less 复制代码
@Component
@RequiredArgsConstructor
@Slf4j
public class TaskListener {

    /**
     * 阿里云kafka
     */
    private final AliYunKafkaProducer aliYunKafkaProducer;

    @TransactionalEventListener(phase = TransactionPhase.AFTER_COMMIT)
    public void createPayableStatementTask(BusinessTaskEvent businessTaskEvent) {
        //业务省略
        ExpectedPayBill expectedPayBill = businessTaskEvent.getExpectedPayBill();
        // 发送消息触发任务执行
        aliYunKafkaProducer.send(getMessageTopic(), JSON.toJSONString(expectedPayBill));
    }

}

核心注解 @TransactionalEventListener(phase = TransactionPhase.AFTER_COMMIT)

方案3:监听数据库binlog变更,再发送事件

方案 实现复杂度 优劣
下游服务过滤异常消息 简单 这个并没有解决数据库事务和消息的一致性,容易给下游造成误导
数据库事务提交之后,通过发布/订阅模式将消息发送给消息队列 简单 需要依赖事务框架
监听数据库binlog变更,再发送事件 复杂 引入中间件,增加系统复杂度,但是业务和事件彻底解耦

参考

事务性发件箱模式:解决数据库事务和消息的一致性
canal使用
TransactionalEventListener解决事物提交与消息发送顺序问题
相关推荐
bobz96519 小时前
mcp 直接操作浏览器
后端
前端小张同学21 小时前
服务器部署 gitlab 占用空间太大怎么办,优化思路。
后端
databook21 小时前
Manim实现闪光轨迹特效
后端·python·动效
武子康1 天前
大数据-98 Spark 从 DStream 到 Structured Streaming:Spark 实时计算的演进
大数据·后端·spark
该用户已不存在1 天前
6个值得收藏的.NET ORM 框架
前端·后端·.net
文心快码BaiduComate1 天前
文心快码入选2025服贸会“数智影响力”先锋案例
前端·后端·程序员
neoooo1 天前
🌐 Cloudflare Tunnel vs ZeroTier:两个世界的内网穿透哲学
后端
卡尔特斯1 天前
Android Kotlin 项目代理配置【详细步骤(可选)】
android·java·kotlin
白鲸开源1 天前
Ubuntu 22 下 DolphinScheduler 3.x 伪集群部署实录
java·ubuntu·开源
涡能增压发动积1 天前
当你不了解“异步”时请慎用“异步”——记一次生产环境故障排查之旅
后端