分布式hadoop集群访问web服务

一、启动和关闭节点

1、在NameNode节点上

(1)启动hdfs

复制代码
start-dfs.sh 

(2)关闭hdfs

复制代码
stop-dfs.sh 
2、在ResourceManager节点上

(1)启动yarn

复制代码
start-yarn.sh

(2)关闭yarn

复制代码
stop-yarn.sh

(3)开启任务历史服务(开启后会存储已提交的任务,有效期为七天)

复制代码
mapred --daemon start historyserver

(4)关闭任务历史服务

复制代码
 mapred --daemon stop historyserver

开启的服务都要在关闭虚拟机前关闭!

二、访问Web服务

1、访问NameNode的Web服务

(1)查看hdfs-site.xml配置文件

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop/

 cat hdfs-site.xml

获取到Web网址

http://bigdata03:9870

(2)查看/etc/hosts

复制代码
cat /etc/hosts

(3)将映射配置复制粘贴到C:\Windows\System32\drivers\etc下的hosts

① 查找位置

② 修改文件权限

③ 在文件末尾加入对应映射关系

(4)在Windows的浏览器中访问http://bigdata03:9870

2、访问yarn的Web服务

前面已经配置过了映射关系,可在Windows里直接访问http://bigdata05:8080

3、访问任务历史服务的Web服务

在ResourceManager节点上查看web网址

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop
cat yarn-site.xml

在Windows中访问网址:http://bigdata05:19888/jobhistory

相关推荐
Flynn Liang1 小时前
Apache Superset 重要特性详解(三):语义层 / 权限 / 缓存 / 嵌入的实战最佳实践(2026 版)
大数据·clickhouse·数据可视化·架构设计·superset·数据分析平台
小田学Python13 小时前
工具调用:让 Agent 从“说”到“做”
大数据·大模型·agent·ai工具·deepseek
GrowingIO技术社区17 小时前
用户行为分析怎么做?从业务目标到改进验证的完整流程
大数据·数据挖掘·数据分析
瑞克-桑切斯20 小时前
docker Harbor 单机部署手册
大数据·运维·elasticsearch·docker·容器
方方洛1 天前
ray教程-28-附录G-CICD与Slurm与云上调度
人工智能·分布式·机器学习
演艺大赏1 天前
NiFi 起不来、登不上、节点被挤掉:一份按日志定位的排错清单
大数据
freejackman1 天前
【实战三】撕开脱敏盲区:深度解析 CASE WHEN 与窗口函数血缘
大数据·数据库·sql
空奈qwq1 天前
【Kafka 从入门到实战】从手写一个队列到生产级消息中间件:架构、分区、消费组、零拷贝全解析
分布式·架构·kafka
wafrdggh1 天前
2026电商快递批量查询怎么用?固乔助手模板设置评测
大数据·数据库·小程序