flink1.15.0消费kafka 报错 The coordinator is not available.

报错

You should retry committing the latest consumed offsets.

Caused by: org.apache.kafka.common.errors.CoordinatorNotAvailableException: The coordinator is not available.

但是任务还在正常跑.

开源bug

[FLINK-28060] Kafka Commit on checkpointing fails repeatedly after a broker restart - ASF JIRA

导致的现象

任务还在跑 认识消费kafka的偏移量没有随着checkpoint提交到kafka broker. 会导致如果监控任务监控kafka broker存储的偏移量,那么就会任务你的任务一致没有消费.

解决

重启任务

升级到flink 1.16.x

相关推荐
唐人街都是苦瓜脸29 分钟前
Kafka和RocketMQ相比有什么区别?那个更好用?
分布式·中间件·kafka·rocketmq
信徒_32 分钟前
Kafka 中的高低水位
分布式·kafka
信徒_34 分钟前
kafka 的存储文件结构
分布式·kafka
猿java1 小时前
为什么有了服务降级,还需要服务熔断?
java·分布式·后端
IT成长日记2 小时前
【Kafka基础】单机安装与配置指南,从零搭建环境
分布式·kafka·单机部署
信徒_8 小时前
Kafka 中的生产者分区策略
分布式·kafka
IT成长日记11 小时前
【Kafka基础】topics命令行操作大全:高级命令解析(2)
kafka·topics·高级命令行操作
郭涤生11 小时前
Chapter 4: Encoding and Evolution_《Designing Data-Intensive Application》
笔记·分布式
IT成长日记12 小时前
【Kafka基础】topics命令行操作大全:高级命令解析(1)
分布式·kafka·topics·高级命令行操作
毛线裤夹腿毛14 小时前
【rabbitmq基础】
网络·分布式·rabbitmq