Spark导入报错:object security is not a member of package org.apache.kafka.common

引言

 build spark里自带的示例项目时报了这样一个错:object kafka is not a member of package org.apache,排查后发现是因为添加的jar依赖里没有kafka这一项,去Maven下载了对应版本的Kafka jar包后放置在examples\jars底下却仍然报错object security is not a member of package org.apache.kafka.common

 进一步查看后发现自己下载的kafka路径底下确实没有security 文件夹,重新去Maven下发下kafaka有很多近似同名的jar包,多次下载查看对应的文件树终于找到一版kafaka包含了security文件夹,为:
https://mvnrepository.com/artifact/org.apache.spark/spark-streaming-kafka-0-10-assembly_2.13/3.5.0

解决方案

 去maven下载自己需要版本的kafka,如果不确定就依次下载到本地尝试,查看其文件树中是否包含需要import的类。

相关推荐
剧号21 小时前
互联网大厂Java面试全解析:Java SE 11, Spring Boot及微服务实战问答
java·微服务·面试·kafka·kubernetes·springboot·分布式系统
范什么特西2 天前
关于kafka
分布式·kafka
味悲2 天前
Apache HTTP 服务器配置
服务器·http·apache
BD_Marathon3 天前
Spark数据源
大数据·ajax·spark
万岳科技系统开发3 天前
AI赋能互联网医院小程序开启智慧医疗新时代
人工智能·小程序·apache
BD_Marathon3 天前
Dataset
spark
愤怒的苹果ext4 天前
Apache Superset 使用
apache·doris·bi·superset·ai bi
qq_185198694 天前
骆驼任务Flowable + Apache Camel 集成
spring·apache·flowable
Wang's Blog4 天前
Go-Zero 项目开发19:基于 Kafka 的异步消息存储与转发实战
golang·kafka
ClickHouseDB4 天前
ClickHouse 十年开源,今非昔比!
clickhouse·开源·apache