Spark导入报错:object security is not a member of package org.apache.kafka.common

引言

build spark里自带的示例项目时报了这样一个错:object kafka is not a member of package org.apache,排查后发现是因为添加的jar依赖里没有kafka这一项,去Maven下载了对应版本的Kafka jar包后放置在examples\jars底下却仍然报错object security is not a member of package org.apache.kafka.common

进一步查看后发现自己下载的kafka路径底下确实没有security 文件夹,重新去Maven下发下kafaka有很多近似同名的jar包,多次下载查看对应的文件树终于找到一版kafaka包含了security文件夹,为:
https://mvnrepository.com/artifact/org.apache.spark/spark-streaming-kafka-0-10-assembly_2.13/3.5.0

解决方案

去maven下载自己需要版本的kafka,如果不确定就依次下载到本地尝试,查看其文件树中是否包含需要import的类。

相关推荐
时鲟、时倾1 小时前
docker部署kafka
docker·容器·kafka
潘达斯奈基~2 小时前
spark性能优化2:Window操作和groupBy操作的区别
大数据·性能优化·spark
向上的车轮3 小时前
数据中台工作流编排引擎:Apache Airflow
apache
雾迟sec3 小时前
Web安全-文件上传漏洞-黑白名单及其它绕过思路(附思维导图)
javascript·安全·web安全·网络安全·apache·安全威胁分析
yumgpkpm6 小时前
CMP(类Cloudera CDP 7.3 404版华为泰山Kunpeng)和Apache Doris的对比
大数据·hive·hadoop·spark·apache·hbase·cloudera
zhangkaixuan4567 小时前
Apache Paimon 查询全流程深度分析
java·apache·paimon
编啊编程啊程14 小时前
【029】智能停车计费系统
java·数据库·spring boot·spring·spring cloud·kafka
乌恩大侠17 小时前
DGX Spark 恢复系统
大数据·分布式·spark
熙客1 天前
Kafka:专注高吞吐与实时流处理的分布式消息队列
分布式·中间件·kafka
A-刘晨阳1 天前
时序数据库选型指南:从大数据视角切入,聚焦 Apache IoTDB
大数据·apache·时序数据库·iotdb