大数据组件常用端口(hdfs端口、hive端口、yarn端口)

1、不要记端口

用多了自然习惯了

为什么?因为端口没意义,只是映射一个地址而已,每套环境都可能有区别,比如CDH的8088,hadoop3的50070,腾讯的TBDS,华为,这些都不一样。

2、怎么去查端口?

web页面看namenode

查hdfs-site.xml文件,hdfs-site.xml里面的

dfs.namenode(有一个地址,dfs.namenode.http-address,这个就是web界面的地址,方便大家页面看hdfs的信息)

代码连接hdfs

查core-site.xml

fs.default.name

修改namenode的端口号

yarn界面访问

查yarn-site.xml

看resource-manager的地址

yarn.resourcemanager.webapp.address

可以修改他的端口号

代码连接hive端口号

查看hive-site.xml

hive.server2.thrift.port

修改端口号

hive界面端口号

修改这个

hive.server2.webui.port


记得改完要重启对应的服务

相关推荐
weixin199701080166 小时前
马可波罗 item_get - 获取商品详情接口对接全攻略:从入门到精通
java·大数据·人工智能
我和我导针锋相队6 小时前
在撰写项目书时,如何在有限的篇幅里平衡呈现“问题链”“合作证据链”和“创新落地计划”,避免内容冗余又能清晰传递核心信息?
大数据·运维·人工智能
AllData公司负责人6 小时前
【亲测好用】数据集成管理能力演示
java·大数据·数据库·开源
zhangfeng11336 小时前
如何用小内存电脑训练大数据的bpe,16g内存训练200g数据集默认是一次性读入内存训练
大数据·人工智能
Elastic 中国社区官方博客6 小时前
Agent Builder 现已正式发布:在几分钟内发布上下文驱动的 agents
大数据·人工智能·elasticsearch·搜索引擎·ai·全文检索
安科瑞小许6 小时前
零碳园区:政策驱动下的智慧能源转型之路
大数据·人工智能·能源·碳排放·零碳园区
AC赳赳老秦7 小时前
跨境科技服务的基石:DeepSeek赋能多语言技术文档与合规性说明的深度实践
android·大数据·数据库·人工智能·科技·deepseek·跨境
存储国产化前线7 小时前
从天硕案例看价值落地:高IOPS工业级SSD如何守护关键任务稳定
大数据
2401_832298107 小时前
腾讯云TSearch存算分离,破解日志分析算力瓶颈
大数据·运维·数据库
无忧智库7 小时前
数据安全管理平台解决方案深度解析:从合规到实战,构建企业数据安全新防线(万字长文)
大数据