Hive hiveserver2 监听端口10000异常 启动失败

-准备工作

start-all.sh启动hadoop两个服务

hive --service metastore & hive --service hiveserver2 & 启动hive两个服务

hiveserver2服务启动时一直输出"... Session ID ..."

-查看siveserveer2 是否监听10000

perl 复制代码
# 用jps和ps -ef查看进程
# 查看10000端口((都启动着,但发现10000端口没有被监听,就还是不行)
jps
ps -ef
ss -ntlp | grep 10000
bash 复制代码
# 检查集群状态【重点看:安全模式(Safe mode);损坏副本块(Blocks with corrupt replicas:)】
hdfs dfsadmin -report

Safe mode is ON:namenode处于安全状态 Blocks with corrupt replicas: 3 :存在 3 个损坏的数据块副本,这是安全模式无法自动退出的根源

#问题+解决方案

1:namenode处于安全模式

csharp 复制代码
# 检查是否处于安全模式
hdfs dfsadmin -safemode get
bash 复制代码
# 手动强制退出安全模式
hdfs dfsadmin -safemode leave

2:处理损坏块

  • 方案 A:删除损坏块(适合测试环境)
arduino 复制代码
hdfs fsck / -delete

这个命令会检查并删除所有损坏的块。

  • 方案 2:重新设置副本数(避免后续报警)
bash 复制代码
# 单节点集群可以把副本数设为 1,减少副本相关报警:
hdfs dfs -setrep -R 1 /

3: notification.api.auth的验证问题

3.1 看不出来问题,查看日志

bash 复制代码
# 先创建你自己的日志目录
mkdir -p $HIVE_HOME/logs
cd $HIVE_HOME/conf
cp hive-log4j2.properties.template hive-log4j2.properties
 
nano hive-log4j2.properties
# 修改 property.hive.log.dir的值为 $HIVE_HOME/logs

# 实时看日志
tail -f $HIVE_HOME/logs/*.log

这说明 HiveServer2 在尝试初始化元数据事件通知功能时,因为权限校验 / 配置问题抛出了异常,导致服务无法正常启动。 ------------------------应该是notification.api.auth的验证问题!

3.2 解决notification.api.auth的验证问题

bash 复制代码
# 备份配置文件
cp $HIVE_HOME/conf/hive-site.xml $HIVE_HOME/conf/hive-site_1.xml.bak
# 编辑 hive-site.xml
nano $HIVE_HOME/conf/hive-site.xml
xml 复制代码
# 添加以下配置(放在 <configuration> 标签内)
<property>
    <name>hive.metastore.event.db.notification.api.auth</name>
    <value>false</value>
</property> 

3.3 🧪 验证修复

bash 复制代码
# 重启后再次查看日志:
tail -f tail -f $HIVE_HOME/logs/*.log

如果日志里不再出现 getCurrentNotificationEventId 相关的报错,并且能看到 HiveServer2: Started 之类的启动成功日志,就说明修复完成了✅。

【日志正常,且10000端口被hiveserver2服务监听】

相关推荐
武子康8 小时前
大数据-246 离线数仓 - 电商分析 Hive 拉链表实战:初始化、每日增量更新、回滚脚本与错误排查
大数据·后端·apache hive
武子康1 天前
大数据-245 离线数仓 - 电商分析 Hive 拉链表入门实战:缓慢变化维 SCD 类型、建表加载与常见错误速查
大数据·后端·apache hive
武子康2 天前
大数据-244 离线数仓 - Hive ODS 层建表与分区加载实战(DataX→HDFS→Hive)
大数据·后端·apache hive
武子康3 天前
大数据-243 离线数仓 - 实战电商核心交易增量导入(DataX - HDFS - Hive 分区
大数据·后端·apache hive
武子康6 天前
大数据-242 离线数仓 - DataX 实战:MySQL 全量/增量导入 HDFS + Hive 分区(离线数仓 ODS
大数据·后端·apache hive
武子康8 天前
大数据-240 离线数仓 - 广告业务 Hive ADS 实战:DataX 将 HDFS 分区表导出到 MySQL
大数据·后端·apache hive
武子康9 天前
大数据-239 离线数仓 - 广告业务实战:Flume 导入日志到 HDFS,并完成 Hive ODS/DWD 分层加载
大数据·后端·apache hive
武子康10 天前
大数据-238 离线数仓 - 广告业务 Hive分析实战:ADS 点击率、购买率与 Top100 排名避坑
大数据·后端·apache hive
武子康11 天前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据·后端·apache hive