kafka容灾演练的方案

背景

kafka可以通过MirrorMaker工具把集群的数据从一个集群同步到另一个集群,通过在另一个数据中心创建灾备集群的方式可以做到容灾的效果,但是如果我们不通过如此重量级的工具也想达到容灾演练的目的,可以怎么做呢

kafka简单容灾实现

当原kafka集群发生crash down时,里面的所有队列中的消息会丢失,此时我们不再理会这些丢失的消息,然后我们会在灾备集群新建一个新的一模一样的topic,后续收发消息都是发送到这个灾备集群的主题中了。

相关推荐
心之伊始35 分钟前
RocketMQ 与 Kafka 架构与实现详解对比
架构·kafka·rocketmq
h7997104 小时前
go资深之路笔记(九)kafka浅析
笔记·golang·kafka
库库8394 小时前
Redis分布式锁、Redisson及Redis红锁知识点总结
数据库·redis·分布式
蒙特卡洛的随机游走5 小时前
Spark核心数据(RDD、DataFrame 和 Dataset)
大数据·分布式·spark
埃泽漫笔5 小时前
Kafka、ActiveMQ、RabbitMQ、RocketMQ 对比
kafka·rabbitmq·activemq
NO.10246 小时前
本地缓存怎么在分布式环境下保持一致性
分布式·缓存
superlls6 小时前
(定时任务)接上篇:定时任务的分布式执行与分布式锁使用场景
java·分布式·后端
回家路上绕了弯7 小时前
高并发后台系统设计要点:从流量削峰到低延迟的实战指南
分布式·后端
Lansonli8 小时前
大数据Spark(六十九):Transformation转换算子intersection和subtract使用案例
大数据·分布式·spark
太阳伞下的阿呆8 小时前
kafka与zero-copy
分布式·kafka