Spark导入报错:object security is not a member of package org.apache.kafka.common

引言

build spark里自带的示例项目时报了这样一个错:object kafka is not a member of package org.apache,排查后发现是因为添加的jar依赖里没有kafka这一项,去Maven下载了对应版本的Kafka jar包后放置在examples\jars底下却仍然报错object security is not a member of package org.apache.kafka.common

进一步查看后发现自己下载的kafka路径底下确实没有security 文件夹,重新去Maven下发下kafaka有很多近似同名的jar包,多次下载查看对应的文件树终于找到一版kafaka包含了security文件夹,为:
https://mvnrepository.com/artifact/org.apache.spark/spark-streaming-kafka-0-10-assembly_2.13/3.5.0

解决方案

去maven下载自己需要版本的kafka,如果不确定就依次下载到本地尝试,查看其文件树中是否包含需要import的类。

相关推荐
Wang's Blog2 小时前
Kafka: 生产者客户端工作机制深度解析
分布式·kafka
ha_lydms3 小时前
4、Spark 函数_m/n/o/p/q/r
大数据·数据库·python·sql·spark·数据处理·dataworks
潘达斯奈基~4 小时前
spark性能优化5:资源配置与并行度优化
大数据·ajax·性能优化·spark
ha_lydms4 小时前
2、Spark 函数_a/b/c
大数据·c语言·hive·spark·时序数据库·dataworks·数据开发
ha_lydms4 小时前
6、Spark 函数_u/v/w/x/y/z
java·大数据·python·spark·数据处理·dataworks·spark 函数
潘达斯奈基~4 小时前
spark性能优化6:内存管理
大数据·测试工具·性能优化·spark
向上的车轮1 天前
Apache Camel 与 Spring Integration的区别是什么?
java·spring·apache
Wang's Blog1 天前
Kafka: 高吞吐量原理、应用场景
分布式·kafka
东东的脑洞1 天前
【面试突击】Kafka 核心面试知识点
面试·职场和发展·kafka
数据与后端架构提升之路1 天前
Apache Iceberg REST Catalog 介绍(包含独立服务搭建、StarRocks 元数据管理和 MinIO 存储)
apache