分布式hadoop集群访问web服务

一、启动和关闭节点

1、在NameNode节点上

(1)启动hdfs

复制代码
start-dfs.sh 

(2)关闭hdfs

复制代码
stop-dfs.sh 
2、在ResourceManager节点上

(1)启动yarn

复制代码
start-yarn.sh

(2)关闭yarn

复制代码
stop-yarn.sh

(3)开启任务历史服务(开启后会存储已提交的任务,有效期为七天)

复制代码
mapred --daemon start historyserver

(4)关闭任务历史服务

复制代码
 mapred --daemon stop historyserver

开启的服务都要在关闭虚拟机前关闭!

二、访问Web服务

1、访问NameNode的Web服务

(1)查看hdfs-site.xml配置文件

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop/

 cat hdfs-site.xml

获取到Web网址

http://bigdata03:9870

(2)查看/etc/hosts

复制代码
cat /etc/hosts

(3)将映射配置复制粘贴到C:\Windows\System32\drivers\etc下的hosts

① 查找位置

② 修改文件权限

③ 在文件末尾加入对应映射关系

(4)在Windows的浏览器中访问http://bigdata03:9870

2、访问yarn的Web服务

前面已经配置过了映射关系,可在Windows里直接访问http://bigdata05:8080

3、访问任务历史服务的Web服务

在ResourceManager节点上查看web网址

复制代码
cd /opt/softs/hadoop3.1.3/etc/hadoop
cat yarn-site.xml

在Windows中访问网址:http://bigdata05:19888/jobhistory

相关推荐
财经汇报几秒前
Unloq发布SC+平台 包括智能合约解决清算难题
大数据·人工智能·智能合约
YA8888888888894 分钟前
技术赋能B端拓客:号码核验行业的迭代与价值升级,氪迹科技法人股东号码核验系统,阶梯式价格
大数据·人工智能
D愿你归来仍是少年6 分钟前
Apache Spark 解第 8 章附加篇:Structured Streaming 底层机制深度剖析
大数据·spark
武子康11 分钟前
大数据-259 离线数仓 - Apache Griffin 0.5.0 大数据质量平台:从配置到部署完整指南
大数据·后端·apache
智慧化智能化数字化方案12 分钟前
2025年中国智慧园区行业发展白皮书【附全文阅读】
大数据·智慧园区行业发展白皮书
星辰_mya26 分钟前
雪花算法:分布式世界的“身份证号”
分布式
RFID舜识物联网28 分钟前
耐高温RFID标签提升汽车喷涂线效率,精准度再升级
大数据·人工智能·嵌入式硬件·物联网·汽车
逆境不可逃39 分钟前
【用AI学Agent】Agent入门进阶:Prompt工程
大数据·数据库·人工智能
piepis40 分钟前
Flink 状态后端核心原理
大数据·flink
XDevelop AI智能应用软件开发1 小时前
从“经验主义”到“AI赋能”:软件工程理论的二次觉醒
大数据