sqoop:错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster(已解决)

1 报错信息

错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

说明:

操作将数据库中的数据导入到HDFS中

执行sqoop import --connect jdbc:mysql://aaa01:3306/mysql --username root --password root --table test 时报了以下错误

2 报错截图:

3 解决步骤

(首先正常关闭集群)

1.输出路径信息(运行代码)

复制代码
hadoop classpath

会输出相应的路径信息

复制代码
[hadoop@aaa01 ~]$ hadoop classpath
/opt/modules/hadoop-3.1.3//etc/hadoop:/opt/modules/hadoop-3.1.3//share/hadoop/common/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/common/*:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/hdfs/*:/opt/modules/hadoop-3.1.3//share/hadoop/mapreduce/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/mapreduce/*:/opt/modules/hadoop-3.1.3//share/hadoop/yarn:/opt/modules/hadoop-3.1.3//share/hadoop/yarn/lib/*:/opt/modules/hadoop-3.1.3//share/hadoop/yarn/*

2.复制上面输出的路径,添加到hadoop下面的yarn-site.xml里面

复制代码
<property>
   <name>yarn.application.classpath</name>
   <value>你的路径信息(上面复制的路径信息)</value>
</property>

3.完成后重启集群

注:在其他帖子上看到是每个节点都要添加相应的信息(上述2操作),但我只在主节点里对应地方添加上就可以执行了

start-all.sh

zkServer.sh start

start-hbase.sh

4.继续运行命令

sqoop import --connect jdbc:mysql://aaa01:3306/mysql --username root --password root --table test,结果未报错,成功解决🤏

相关推荐
K_i13419 小时前
Hadoop 集群自动化运维实战
运维·hadoop·自动化
Q264336502321 小时前
【有源码】基于Python与Spark的火锅店数据可视化分析系统-基于机器学习的火锅店综合竞争力评估与可视化分析-基于用户画像聚类的火锅店市场细分与可视化研究
大数据·hadoop·python·机器学习·数据分析·spark·毕业设计
顧棟1 天前
【Yarn实战】Yarn 2.9.1滚动升级到3.4.1调研与实践验证
hadoop·yarn
D明明就是我2 天前
Hive 拉链表
数据仓库·hive·hadoop
嘉禾望岗5032 天前
hive join优化和数据倾斜处理
数据仓库·hive·hadoop
yumgpkpm2 天前
华为鲲鹏 Aarch64 环境下多 Oracle 数据库汇聚操作指南 CMP(类 Cloudera CDP 7.3)
大数据·hive·hadoop·elasticsearch·zookeeper·big data·cloudera
忧郁火龙果2 天前
六、Hive的基本使用
数据仓库·hive·hadoop
忧郁火龙果2 天前
五、安装配置hive
数据仓库·hive·hadoop
励志成为糕手2 天前
宽依赖的代价:Spark 与 MapReduce Shuffle 的数据重分布对比
大数据·spark·mapreduce·分布式计算·sortshuffle
chad__chang2 天前
dolphinscheduler安装过程
hive·hadoop