Kafka下沉到HDFS报错

错误信息

24 十二月 2023 12:38:25,127 INFO [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSCompressedDataStream.configure:64) - Serializer = TEXT, UseRawLocalFileSystem = false

24 十二月 2023 12:38:25,129 ERROR [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSEventSink.process:457) - process failed

java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V

错误原因

由于hadoop和flume中guava这个jar包冲突导致,二者不兼容。

解决办法

把flume中的guava包删掉,即可正常运行。

相关推荐
frankfishinwater4 小时前
Kafka 代码架构分析
分布式·架构·kafka
隔壁寝室老吴1 天前
使用Flink2.0消费低版本的Kafka
分布式·kafka
indexsunny1 天前
互联网大厂Java面试实战:Spring Boot微服务与Kafka消息队列深度解析
java·spring boot·微服务·面试·kafka·消息队列·电商
富士康质检员张全蛋1 天前
Kafka架构 主题中的分区
分布式·kafka
富士康质检员张全蛋1 天前
kafka 环境部署
分布式·kafka
富士康质检员张全蛋1 天前
Kafka架构 Kafka核心概念
kafka
FL4m3Y4n1 天前
分布式消息推送系统协议设计【C++ grpc kafka】
c++·分布式·kafka
小的~~1 天前
Kafka消费端周期性停顿,导致工厂设备甘特图失准
kafka·linq·甘特图
江畔何人初1 天前
Kafka 消息队列概念及与RabbitMQ 的区别
运维·服务器·分布式·云原生·kafka·rabbitmq
indexsunny2 天前
互联网大厂Java求职面试实战:Spring Boot微服务在电商场景中的应用与挑战
java·spring boot·redis·面试·kafka·oauth2·microservices