大数据组件常用端口(hdfs端口、hive端口、yarn端口)

1、不要记端口

用多了自然习惯了

为什么?因为端口没意义,只是映射一个地址而已,每套环境都可能有区别,比如CDH的8088,hadoop3的50070,腾讯的TBDS,华为,这些都不一样。

2、怎么去查端口?

web页面看namenode

查hdfs-site.xml文件,hdfs-site.xml里面的

dfs.namenode(有一个地址,dfs.namenode.http-address,这个就是web界面的地址,方便大家页面看hdfs的信息)

代码连接hdfs

查core-site.xml

fs.default.name

修改namenode的端口号

yarn界面访问

查yarn-site.xml

看resource-manager的地址

yarn.resourcemanager.webapp.address

可以修改他的端口号

代码连接hive端口号

查看hive-site.xml

hive.server2.thrift.port

修改端口号

hive界面端口号

修改这个

hive.server2.webui.port


记得改完要重启对应的服务

相关推荐
七夜zippoe2 小时前
Agent 上线第一天就炸了:6 个生产事故的根因分析与修复记录
大数据·ai·agent·根因分析·修复记录
字节跳动数据平台4 小时前
不重拍,也能换道具、换商品、换画风?短剧转漫、电商换款新解法来了
大数据
武子康4 小时前
攻击动作做对了,游戏规则就对了吗?H3-World 与三条控制路线的分工
大数据·人工智能·agent
Lansonli5 小时前
大数据Spark(八十七):Spark-Submit 参数详解
大数据·分布式·spark
cc5725026535 小时前
数据科学与大数据技术专业考证清单有哪些?
大数据
喵个咪1 天前
GoWind Admin 拆解:BI 大屏设计器——schema 即 JSON、resolver 注入与三张快照表的口径谱系
大数据·后端·go
武子康1 天前
H3-World 的 11.3 小时训练数据,是怎样对齐成动作监督的?
大数据·人工智能·深度学习
字节跳动数据平台1 天前
火山引擎知识引擎VeKnow进化之路(下):让 AI 智能体更可用、更可信、更懂业务
大数据
Elastic 中国社区官方博客1 天前
更少的位数,相同的召回率:DiskBBQ 更保守的自动校准扫描
大数据·运维·开发语言·人工智能·elasticsearch·搜索引擎
MyBili1 天前
Chrome隐私安全配置:完整防护指南
大数据·chrome·谷歌浏览器·隐私安全·浏览器防护·cookie管理·上网痕迹清理