windows的hadoop集群环境直接配

已经配好资源如下:

https://download.csdn.net/download/hashiqimiya/92754521https://download.csdn.net/download/hashiqimiya/92754521

修改 core-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\core-site.xml

  • 修改 fs.defaultFS 参数为HDFS格式

    <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>E:/hadooptmp/hadoop-${user.name}</value> </property> </configuration>
  • 修改 hdfs-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\hdfs-site.xml

  • 添加或修改副本数配置

  • 正确的hdfs-site.xml配置示例 :

    <configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.namenode.name.dir</name> <value>file:///${hadoop.tmp.dir}/dfs/name</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>file:///${hadoop.tmp.dir}/dfs/data</value> </property> </configuration>

重新格式化NameNode :

  • 执行命令: hadoop.cmd namenode -format

  • 然后重新启动Hadoop服务

将hadoo2.6.4的hadoop.dll和winutils.exe.zip文件解压覆盖hadoop的bin。

注意hadoop2.6.4兼容jdk8.不兼容jdk17.

相关推荐
GuangHeAI_ATing2 分钟前
军工企业数据存储如何保障?横向实测三款航天级SSD的可靠性与性能(含湖南天硕G55系列技术拆解)
大数据·数据库·人工智能
8Qi811 分钟前
Elasticsearch 初识篇:核心概念与环境搭建
java·大数据·分布式·elasticsearch·搜索引擎·中间件
蜡台13 分钟前
Git stash、reset、 cherry-pick 、revert 、reflog 常用命令使用说明
大数据·git·搜索引擎
搞科研的小刘选手14 分钟前
【多省气象局支持】第八届物联网、自动化和人工智能国际学术会议(IoTAAI 2026)
大数据·人工智能·物联网·机器学习·自动化·气象·控制科学
白毛大侠15 分钟前
Elasticsearch 核心概念解析:从倒排索引到字段存储
大数据·elasticsearch·jenkins
隐于花海,等待花开26 分钟前
窗口函数之排序函数详细解读及示例
大数据·数据库·hive
武子康35 分钟前
大数据-270 Spark MLib-机器学习库快速入门(分类/回归/聚类/推荐)
大数据·后端·spark
数字化顾问1 小时前
(87页PPT)数据战略规划(附下载方式)
大数据·数据仓库·数据挖掘
QYR_Jodie1 小时前
电子设备迭代与新能源扩张驱动,稳增前行:全球散热器2025年31.70亿,2032年锚定54.81亿,2026-2032年CAGR7.7%
大数据·人工智能·市场报告
The Open Group1 小时前
数据资产与TOGAF® |TOGAF如何重构数据治理体系
大数据·人工智能·重构