windows的hadoop集群环境直接配

已经配好资源如下:

https://download.csdn.net/download/hashiqimiya/92754521https://download.csdn.net/download/hashiqimiya/92754521

修改 core-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\core-site.xml

  • 修改 fs.defaultFS 参数为HDFS格式

    <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>E:/hadooptmp/hadoop-${user.name}</value> </property> </configuration>
  • 修改 hdfs-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\hdfs-site.xml

  • 添加或修改副本数配置

  • 正确的hdfs-site.xml配置示例 :

    <configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.namenode.name.dir</name> <value>file:///${hadoop.tmp.dir}/dfs/name</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>file:///${hadoop.tmp.dir}/dfs/data</value> </property> </configuration>

重新格式化NameNode :

  • 执行命令: hadoop.cmd namenode -format

  • 然后重新启动Hadoop服务

将hadoo2.6.4的hadoop.dll和winutils.exe.zip文件解压覆盖hadoop的bin。

注意hadoop2.6.4兼容jdk8.不兼容jdk17.

相关推荐
AI营销先锋2 小时前
原圈科技GEO解密:AI营销变革下,如何抢占增长先机?
大数据·人工智能
pingao1413783 小时前
智慧井盖传感器:革新传统,开启地下管网智能运维新时代
大数据
云飞云共享云桌面3 小时前
非标自动化研发成本高?云飞云共享云桌面:1台主机=10台工作站,年省数十万。
大数据·运维·服务器·人工智能·自动化·云计算·电脑
互联网江湖6 小时前
快手营收利润双增,可灵AI会不会成为第二个Seedance?
大数据·人工智能
KANGBboy6 小时前
ES 父子索引使用
大数据·elasticsearch·搜索引擎
pp起床6 小时前
Part02:基本概念以及基本要素
大数据·人工智能·算法
Gauss松鼠会6 小时前
【GaussDB】LLVM技术在GaussDB等数据库中的应用
大数据·数据库·架构·数据库开发·gaussdb·llvm
易天ETU7 小时前
100G BIDI 80km ZR4光模块:长距离传输的革新力量
大数据·光模块·易天光通信
七夜zippoe7 小时前
OpenClaw 接入 Discord:从零开始
大数据·人工智能·microsoft·discord·openclaw