windows的hadoop集群环境直接配

已经配好资源如下:

https://download.csdn.net/download/hashiqimiya/92754521https://download.csdn.net/download/hashiqimiya/92754521

修改 core-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\core-site.xml

  • 修改 fs.defaultFS 参数为HDFS格式

    fs.defaultFS hdfs://localhost:9000 hadoop.tmp.dir E:/hadooptmp/hadoop-${user.name}
  • 修改 hdfs-site.xml 配置文件 :

  • 找到文件: G:\1\hadoo2.6.4的hadoop.dll和winutils.exe\em\hadoop-2.6.4\hadoop-2.6.4\etc\hadoop\hdfs-site.xml

  • 添加或修改副本数配置

  • 正确的hdfs-site.xml配置示例 :

    dfs.replication 1 dfs.namenode.name.dir file:///${hadoop.tmp.dir}/dfs/name dfs.datanode.data.dir file:///${hadoop.tmp.dir}/dfs/data

重新格式化NameNode :

  • 执行命令: hadoop.cmd namenode -format

  • 然后重新启动Hadoop服务

将hadoo2.6.4的hadoop.dll和winutils.exe.zip文件解压覆盖hadoop的bin。

注意hadoop2.6.4兼容jdk8.不兼容jdk17.

相关推荐
tedcloud1232 小时前
Wand-Enhancer 怎么搭建?开源 Wand 客户端增强与远程控制工具介绍
大数据·服务器·人工智能·开源·音视频
大大大大晴天3 小时前
每天认识一个组件:分布式缓存Alluxio
大数据
AI_Auto5 小时前
架构视角看数字化转型|核心架构:大共享平台+小应用,从按需走向适变
大数据·人工智能·架构·制造
小蒋观天下5 小时前
社区AI智能摄像头完整选型指南
大数据·人工智能·安全·计算机视觉·语音识别·ai大模型
AI 思录5 小时前
Prompt 事故档案(八):日常表达被标为“待校准”,AI 的爹味语法从哪里来
大数据·人工智能·算法·prompt·用户体验·ai合规
2601_965742227 小时前
全媒体运营与短视频代运营,两者有什么区别?
大数据·数据结构·人工智能·算法·ai·媒体
anxiao_m7 小时前
2026企业AI数字孪生选型攻略,不同场景对应不同解决方案
大数据·网络·数据库
SelectDB7 小时前
从 ClickHouse 迁移到 Doris:SQL 兼容、同步与验证清单(实战笔记)
大数据·数据库·数据分析
SelectDB8 小时前
Doris 还是 ClickHouse?一张表说清 6 个关键差异(实战笔记)
大数据·数据库·数据分析
DolphinScheduler社区8 小时前
Apache DolphinScheduler 8 月报:权限安全加固,调度补火上线,性能与稳定性持续提升
大数据·安全·开源·apache·任务调度·海豚调度