IDEA2025版本使用Big Data Tools连接Linux上Hadoop的HDFS

目录

Windows的准备

[1. 将与Linux上版本相同的hadoop压缩包解压到本地](#1. 将与Linux上版本相同的hadoop压缩包解压到本地)

[​编辑2.设置HADOOP HOME环境变量指向:E:\\hadoop-3.3.4](#编辑2.设置HADOOP HOME环境变量指向:E:\hadoop-3.3.4)

3.下载hadoop.dll和winutils.exe文件

[4.将hadoop.dll和winutils.exe放入HADOOP HOME/bin中](#4.将hadoop.dll和winutils.exe放入HADOOP HOME/bin中)

IDEA中操作

[1.下载Big Data Tools插件](#1.下载Big Data Tools插件)

2.添加并连接HDFS


Windows的准备

1. 将与Linux上版本相同的hadoop压缩包解压到本地

如解压到E:\Hadoop。

2.设置$HADOOP HOME环境变量指向:E:\hadoop-3.3.4

打开此电脑的属性

找到环境变量,进入环境变量,点击进入系统变量,编辑,添加

复制代码
HADOOP_HOME
​​​​​​​E:\Hadoop\hadoop-3.3.4

点击确定,确定,确定!!!

确保环境变量配置正确,如下图。

3.下载hadoop.dll和winutils.exe文件

下载路径如下:

4.将hadoop.dll和winutils.exe放入$HADOOP HOME/bin中

IDEA中操作

1.下载Big Data Tools插件

确保 IDEA 版本与 Big Data Tools 兼容, 本文以IntelliJ IDEA 2025.1.1.1为例

2.添加并连接HDFS

安装好之后, 右侧边栏会出现Big Data Tools的选项框。

点击选项框, 在左上角的 + 中选择添加HDFS

​​​​​​​

然后进行如下操作:

  • 在红框内填入Linux服务器地址或者虚拟机的IP地址
  • 在黄框内填入Linux中使用hadoop的用户

然后点击测试链接,成功会显示已连接,然后点击确定,如下图。

至此,IDEA成功连接Hadoop的HDFS。

相关推荐
九河云8 分钟前
从“被动适配”到“主动重构”:企业数字化转型的底层逻辑
大数据·人工智能·安全·重构·数字化转型
培培说证2 小时前
2026 中专大数据技术专业考证书门槛低的有哪些?
大数据
小北方城市网2 小时前
第1课:架构设计核心认知|从0建立架构思维(架构系列入门课)
大数据·网络·数据结构·python·架构·数据库架构
收获不止数据库3 小时前
黄仁勋2026CES演讲复盘:旧世界,裂开了!
大数据·数据库·人工智能·职场和发展
老胡全房源系统3 小时前
房产中介管理系统哪一款性价比高
大数据·人工智能·房产经纪人培训
黄焖鸡能干四碗3 小时前
信息安全网络安全评估报告(WORD)
大数据·网络·人工智能·安全·web安全·制造·需求分析
汤姆yu3 小时前
基于python大数据的协同过滤音乐推荐系统
大数据·开发语言·python
Data_agent3 小时前
Cssbuy 模式淘宝 / 1688 代购系统南美市场搭建指南
大数据·python
川西胖墩墩3 小时前
团队协作泳道图制作工具 PC中文免费
大数据·论文阅读·人工智能·架构·流程图
云启数智YQ4 小时前
企业进行大数据迁移的注意事项有些什么?
大数据·大文件传输·跨国文件传输·内外网文件传输·大文件传输软件