doris避坑之端口冲突

1.问题描述

启动使用doris的时,无法同时启动Hadoop HA。

2.问题原因

doris 默认端口 和 Yarn 默认端口存在冲突, 导致同时启动时,端口冲突无法启动。

3.doris使用的端口

4.Yarn使用的默认端口

5.解决方案

解决方案:即修改Yarn默认端口或者修改 Doris 默认端口。

修改Yarn默认端口,原因yarn的8040端口平时不用,但是doris默认的这个端口经常使用,具体修改如下:

复制代码
vim $HADOOP_HOME/etc/hadoop/yarn-site.xml
---------------- 修 改 -------------------
<property>  
    <name>yarn.resourcemanager.scheduler.address</name>  
    <value>原来的不变:8035</value>  	<!-- 这里只修改端口号 8030 -> 8035 -->
</property>
<property>  
    <name>yarn.nodemanager.localizer.address</name>  
    <value>原来的不变:8046</value>   <!-- 这里只修改端口号 8040 -> 8046 -->
</property>
------------------------------------------
相关推荐
Q26433650235 小时前
【有源码】基于机器学习的商场商铺运营分群与可视化分析研究 基于Spark的商场商铺经营效率分析与可视化
大数据·hadoop·机器学习·数据挖掘·数据分析·spark·毕业设计
Gl�ria5 小时前
Hadoop MapReduce / Hive 场景:ReduceTask 热点 Key 排查
运维·hadoop·数据倾斜
Q26433650231 天前
【有源码】基于机器学习的电信网络诈骗话术语义识别与可视化分析系统 XGBoost算法+Hadoop+Spark
大数据·hadoop·算法·机器学习·spark·毕业设计·课程设计
Q26433650231 天前
【有源码】基于 Hadoop 的强化学习智能体轨迹数据挖掘与可视化分析系统大数据毕设项目
大数据·hadoop·机器学习·数据挖掘·spark·课程设计·数据可视化
Q26433650231 天前
【有源码】基于大数据的药品多维度属性分析可视化系统 基于Spark的药品属性聚类与关联规则可视化分析系统
hadoop·机器学习·数据挖掘·spark·毕业设计·课程设计·大数据项目
Q26433650231 天前
【有源码】基于大数据的零售交易者行为特征与生存状况数据分析及可视化 Hadoop+Spark大数据项目
大数据·hadoop·信息可视化·数据挖掘·数据分析·spark·毕业设计
Q26433650231 天前
【有源码】基于 Hadoop 生态的化妆品销售数据存储分析与可视化 面向化妆品行业的用户画像构建与销售机会识别研究
大数据·hadoop·python·机器学习·spark·毕业设计·课程设计
计算机编程-吉哥2 天前
基于机器学习的城市交通拥堵分析与预测平台【计算机毕业设计选题·机器学习·随机森林算法】
hadoop·算法·随机森林·机器学习·课程设计·计算机毕业设计选题·大数据毕业设计选题推荐
计算机源码社2 天前
基于Hadoop+Spark的黄金市场历史数据特征分析与可视化大屏 基于K-Means聚类算法的黄金历史价格阶段划分研究
大数据·hadoop·python·数据挖掘·数据分析·spark·毕业设计
2601_962300813 天前
机器学习贴士:使用Python编写MapReduce
hadoop·python·机器学习·mapreduce·数据处理