分布式hadoop集群访问web服务

一、启动和关闭节点

1、在NameNode节点上

(1)启动hdfs

复制代码
start-dfs.sh 

(2)关闭hdfs

复制代码
stop-dfs.sh 
2、在ResourceManager节点上

(1)启动yarn

复制代码
start-yarn.sh

(2)关闭yarn

复制代码
stop-yarn.sh

(3)开启任务历史服务(开启后会存储已提交的任务,有效期为七天)

复制代码
mapred --daemon start historyserver

(4)关闭任务历史服务

复制代码
 mapred --daemon stop historyserver

开启的服务都要在关闭虚拟机前关闭!

二、访问Web服务

1、访问NameNode的Web服务

(1)查看hdfs-site.xml配置文件

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop/

 cat hdfs-site.xml

获取到Web网址

http://bigdata03:9870

(2)查看/etc/hosts

复制代码
cat /etc/hosts

(3)将映射配置复制粘贴到C:\Windows\System32\drivers\etc下的hosts

① 查找位置

② 修改文件权限

③ 在文件末尾加入对应映射关系

(4)在Windows的浏览器中访问http://bigdata03:9870

2、访问yarn的Web服务

前面已经配置过了映射关系,可在Windows里直接访问http://bigdata05:8080

3、访问任务历史服务的Web服务

在ResourceManager节点上查看web网址

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop
cat yarn-site.xml

在Windows中访问网址:http://bigdata05:19888/jobhistory

相关推荐
AI猫站长2 分钟前
快讯|智谱GLM-5-Turbo实测:面向OpenClaw深度优化,响应提速60%,token消耗减少17.8%
大数据·人工智能·数据挖掘·具身智能·灵心巧手
sagima_sdu8 分钟前
主流开源大模型架构全景
大数据·linux·人工智能
芯跳加速11 分钟前
Obsidian智能体学习(二)
大数据·人工智能·学习
紧固视界18 分钟前
2026上海紧固件专业展展会规模、展品范围及参展价值解析
大数据·人工智能·紧固件·上海紧固件展·紧固件展·上海紧固件专业展
不想看见40421 分钟前
Git的工作原理和基本使用
大数据·elasticsearch·搜索引擎
V搜xhliang024626 分钟前
医疗场景多模态交互
大数据·人工智能·机器人·交互·语音识别·xcode
yhdata30 分钟前
自卸车软件市场规模锁定18.15亿元,精准数据勾勒行业进阶新图景
大数据·人工智能
jixingkj34 分钟前
手机截屏失败全解析:从操作误区到系统设置的深度解密
大数据·安全·智能手机
星辰_mya1 小时前
Redis 锁的“续命”艺术:看门狗机制与原子性陷阱
数据库·redis·分布式·缓存·面试
MonkeyKing_sunyuhua1 小时前
中国传统企业怎么应对AI时代
大数据·人工智能