Kafka下沉到HDFS报错

错误信息

24 十二月 2023 12:38:25,127 INFO [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSCompressedDataStream.configure:64) - Serializer = TEXT, UseRawLocalFileSystem = false

24 十二月 2023 12:38:25,129 ERROR [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSEventSink.process:457) - process failed

java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V

错误原因

由于hadoop和flume中guava这个jar包冲突导致,二者不兼容。

解决办法

把flume中的guava包删掉,即可正常运行。

相关推荐
故事很腻i8 小时前
安装kafka-2.5.1
分布式·kafka
坐吃山猪9 小时前
Kafka11-知识补充
kafka
yumgpkpm10 小时前
CMP平台(类Cloudera CDP7.3)在华为鲲鹏的Aarch64信创环境中的性能表现
大数据·flink·kafka·big data·flume·cloudera
hhhjjjj21 小时前
kafka4使用记录
kafka
shinelord明1 天前
【大数据开发实践】Kafka REST Proxy~无缝集成 Kafka
大数据·分布式·架构·kafka
老葱头蒸鸡2 天前
(2)Kafka架构原理与存储机制
分布式·架构·kafka
jc06203 天前
4.3-中间件之Kafka
分布式·中间件·kafka
WnHj3 天前
kafka的数据消费通过flinksql 入数到Doris的报错(Connection timed out)
分布式·kafka
哥不是小萝莉3 天前
Kafka监控工具 EFAK-AI 介绍
ai·kafka
1.01^10003 天前
[7-01-02].第05节:环境搭建 - 基础环境
kafka