sqoop:错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster(已解决)

1 报错信息

错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

说明:

操作将数据库中的数据导入到HDFS中

执行sqoop import --connect jdbc:mysql://aaa01:3306/mysql --username root --password root --table test 时报了以下错误

2 报错截图:

3 解决步骤

(首先正常关闭集群)

1.输出路径信息(运行代码)

复制代码
hadoop classpath

会输出相应的路径信息

复制代码
[hadoop@aaa01 ~]$ hadoop classpath
/opt/modules/hadoop-3.1.3//etc/hadoop:/opt/modules/hadoop-3.1.3//share/hadoop/common/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/common/*:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs/*:/opt/modules/hadoop-3.1.3//share/hadoop/mapreduce/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/mapreduce/*:/opt/modules/hadoop-3.1.3//share/hadoop/yarn:/opt/modules/hadoop-3.1.3//share/hadoop/yarn/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/yarn/*

2.复制上面输出的路径,添加到hadoop下面的yarn-site.xml里面

复制代码
<property>
   <name>yarn.application.classpath</name>
   <value>你的路径信息(上面复制的路径信息)</value>
</property>

3.完成后重启集群

注:在其他帖子上看到是每个节点都要添加相应的信息(上述2操作),但我只在主节点里对应地方添加上就可以执行了

start-all.sh

zkServer.sh start

start-hbase.sh

4.继续运行命令

sqoop import --connect jdbc:mysql://aaa01:3306/mysql --username root --password root --table test,结果未报错,成功解决🤏

相关推荐
Irene19911 天前
Sqoop 快速入门指南(在关系型数据库之间高效批量传输数据)
sqoop
段一凡-华北理工大学1 天前
工业领域的Hadoop架构学习~系列文章01:Hadoop与工业4.0深度融合
大数据·hadoop·学习·架构·知识图谱·高炉炼铁·工业智能体
小欣加油2 天前
Hive综合应用案例——用户学历查询
数据仓库·hive·hadoop
卷毛迷你猪2 天前
快速实验篇(A2-1)基于MapReduce的数据质量筛查与清洗
大数据·mapreduce
至此流年莫相忘2 天前
CentOS 部署 Hadoop 环境指导文档
linux·hadoop·centos
yumgpkpm2 天前
Hadoop(CDH6、CDP7)在Qwen3.7大模型训练中的作用,(含部署、运行操作步骤)
大数据·hive·hadoop·分布式·zookeeper·spark·kafka
Irene19913 天前
正确停止 Sqoop 任务:yarn application -kill(直接 kill 进程会触发重启,且可能导致状态不一致)
hadoop·sqoop
南屹川3 天前
【大数据】大数据处理技术栈:从采集到分析的完整链路
大数据·人工智能·hadoop·flink·spark·数据处理
Irene19914 天前
Sqoop 安装完整教程(基于 WSL2 + Ubuntu 24.04)
hadoop·ubuntu·sqoop
m0_639310796 天前
大数据技术原理-HDFS的安装与应用
java·大数据·jvm·hadoop·spring·hdfs·eclipse