Hadoop-004-Big Data Tools插件的使用

一、Big Data Tools插件配置流程

1、安装Big Data Tools插件

以IntelliJ IDEA 2024.2.3为例打开setting, 搜索安装Big Data Tools插件后重启IDEA

2、Windows系统基础配置

Windows系统需要做一些基础设置,配合插件使用,将之前下载的hadoop-3.2.4.tar.gz 解压到D:\Develop 目录下

java 复制代码
设置$HADOOP_HOME环境变量指向:D:\Develop\hadoop-3.2.4

下载这两个文件放到 D:\Develop\hadoop-3.2.4\bin 下

hadoop.dll

java 复制代码
https://github.com/steveloughran/winutils/blob/master/hadoop-3.0.0/bin/hadoop.dll

winutils.exe

java 复制代码
https://github.com/steveloughran/winutils/blob/master/hadoop-3.0.0/bin/winutils.exe

3、配置环境变量

然后再配置下环境变量

4、连接测试正常

5、操作文件

相关推荐
小王毕业啦30 分钟前
省级-农业科技创新(农业科技专利)数据(2010-2022年)
大数据·人工智能·科技·数据挖掘·数据分析·社科数据
数据要素X1 小时前
【数据仓库】Hive 拉链表实践
大数据·数据库·数据仓库·人工智能·hive·hadoop·安全
hummhumm1 小时前
Oracle 第26章:Oracle Data Guard
java·大数据·前端·数据库·后端·python·oracle
小强签名设计1 小时前
Flink CDC 同步 Mysql 数据
大数据·mysql·flink
牧竹子1 小时前
FLINK单机版安装部署入门-1
大数据·flink
web3探路者1 小时前
加密货币行业与2024年美国大选
java·大数据·web3·区块链·团队开发·开源软件
Python 集中营3 小时前
如何使用springboot+redis开发一个简洁的分布式锁?
spring boot·redis·分布式
sf_www4 小时前
flink 内存配置(四):内存调优和问题处理
大数据·flink
小黑034 小时前
Spark资源调度和任务调度
大数据·分布式·spark
我的K84094 小时前
Flink的环境搭建及使用
大数据·flink·intellij-idea