spark无法执行pi_如何验证spark搭建完毕

在配置yarn环境下的spark时,执行尚硅谷的以下命令发现报错,找不到这个也找不到那个,尚硅谷的代码是

python 复制代码
bin/spark-submit \ --class org.apache.spark.examples.SparkPi \ --master yarn \ --deploy-mode cluster \ ./examples/jars/spark-examples_2.12-3.0.0.jar \ 10

正确代码是:

python 复制代码
bin/spark-submit --master yarn --deploy-mode client --class org.apache.spark.examples.SparkPi /opt/module/spark-yarn/examples/jars/spark-examples_*.jar 10

去hadoop103::8088查看:

相关推荐
YangYang9YangYan2 分钟前
2025年金融专业人士职业认证发展路径分析
大数据·人工智能·金融
AIbase20243 分钟前
GEO优化服务:技术演进如何重塑搜索优化行业新范式
大数据·人工智能
励志成为糕手36 分钟前
Hadoop进程:深入理解分布式计算引擎的核心机制
大数据·hadoop·分布式·mapreduce·yarn
武子康1 小时前
大数据-92 Spark 深入解析 Spark Standalone 模式:组件构成、提交流程与性能优化
大数据·后端·spark
掘金-我是哪吒1 小时前
分布式微服务系统架构第170集:Kafka消费者并发-多节点消费-可扩展性
分布式·微服务·架构·kafka·系统架构
何双新1 小时前
第 3 讲:KAFKA生产者(Producer)详解
分布式·kafka·linq
像豆芽一样优秀1 小时前
Hive和Flink数据倾斜问题
大数据·数据仓库·hive·hadoop·flink
Heliotrope_Sun1 小时前
RabbitMQ
分布式·rabbitmq
TMT星球1 小时前
发布工业智能体,云从科技打造制造业AI“运营大脑”
大数据·人工智能·科技
KIDAKN2 小时前
Redis 分布式锁
数据库·redis·分布式