Windows安装Hadoop运行环境

1、下载Hadoop

2、解压Hadoop

powershell 复制代码
tar zxvf hadoop-3.1.1.tar.gz

3、设置Hadoop环境变量

3.1.1、系统环境变量

powershell 复制代码
# 
HADOOP_HOME = D:\software\hadoop-3.1.1

3.1.2、Path 环境变量

powershell 复制代码
%HADOOP_HOME%\bin
%HADOOP_HOME%\sbin

3.1.3、修改Hadoop文件JAVA_HOME
注 : 路径中不要出现空格 , 尤其是 Program Files 目录 , 不要把 JDK 安装在这个目录中 , 有大坑 ;

powershell 复制代码
# D:\software\hadoop-3.1.1\etc\hadoop\hadoop-env.cmd

# 将 set JAVA_HOME=%JAVA_HOME% 修改为
set JAVA_HOME=D:\software\Jdk\jdk1.8.0_201

4、安装winutils

4.1、拷贝winutils

注: 将hadoop.dll 和 winutils.exe 文件拷贝到 C:\Windows\System32 目录中

4.2、重启电脑

重启电脑 , 一定要重启 , 否则不生效 。

4.3、验证Hadoop效果

powershell 复制代码
hadoop -version

hadoop

4.4、授权

注: 进入hadoop\bin目录下,以管理员方式打开cmd,输入命令:

powershell 复制代码
winutils.exe chmod 777
相关推荐
love530love27 分钟前
Docker 稳定运行与存储优化全攻略(含可视化指南)
运维·人工智能·windows·docker·容器
武子康3 小时前
大数据-34 HBase 单节点配置 hbase-env hbase-site xml
大数据·后端·hbase
Edingbrugh.南空3 小时前
Hadoop MapReduce 入门
大数据·hadoop·mapreduce
huisheng_qaq3 小时前
【ElasticSearch实用篇-01】需求分析和数据制造
大数据·elasticsearch·制造
G.E.N.4 小时前
开源!RAG竞技场(2):标准RAG算法
大数据·人工智能·深度学习·神经网络·算法·llm·rag
勤奋的知更鸟5 小时前
Kettle + 大数据实战:从数据采集到分布式处理的完整流程指南
大数据·分布式
1024小神5 小时前
tauri项目在windows上的c盘没有权限写入文件
c语言·开发语言·windows
鸭鸭鸭进京赶烤12 小时前
大学专业科普 | 云计算、大数据
大数据·云计算
程序视点14 小时前
Window 10文件拷贝总是卡很久?快来试试这款小工具,榨干硬盘速度!
windows
wuk99814 小时前
基于MATLAB编制的锂离子电池伪二维模型
linux·windows·github