hive连不上,报错9000拒绝连接

参考:豆包、百度

一、排查错误

客户端(你执行 hdfs dfsadmin -safemode ...)去连接 NameNode 的 9000 端口,但连接被拒绝。

这说明 NameNode 根本没在监听 9000 端口(或者进程没启动,或者启动失败)。

jps查看进程,发现没有namenode

查看日志:

复制代码
tail -n 100 hadoop-$(whoami)-namenode-$(hostname).log

发现

复制代码
Storage directory /tmp/hadoop-root/dfs/name does not exist
...
InconsistentFSStateException: Directory /tmp/hadoop-root/dfs/name is in an inconsistent state

这说明 NameNode 的元数据目录不存在,所以 NameNode 启动失败,也就导致 9000 端口没有监听,出现 "拒绝连接" 错误。

二、解决方法

修改配置,将数据目录放到非 /tmp 位置(推荐)

复制代码
mkdir -p /hadoop_data/hadoop/data/namenode
mkdir -p /hadoop_data/hadoop/data/datanode
chown -R hadoop:hadoop /hadoop_data/hadoop

编辑 $HADOOP_HOME/etc/hadoop/hdfs-site.xml

复制代码
<property>
  <name>dfs.namenode.name.dir</name>
  <value>/hadoop_data/hadoop/data/namenode</value>
</property>
<property>
  <name>dfs.datanode.data.dir</name>
  <value>/hadoop_data/hadoop/data/datanode</value>
</property>

格式化并启动

复制代码
stop-all.sh
hdfs namenode -format
start-all.sh
jps

这样即使重启机器,数据也不会丢失。

9000 端口也有数据了。

复制代码
[root@localhost ~]# jps
1107 Elasticsearch
28483 NameNode
29236 NodeManager
29111 ResourceManager
28618 DataNode
30108 RunJar
31468 Jps
28830 SecondaryNameNode
29950 RunJar

[root@localhost ~]# netstat -nlpt|grep 9000
tcp        0      0 127.0.0.1:9000          0.0.0.0:*               LISTEN      28483/java  

三、HiveServer2/Beeline方式连接hive(推荐)

启动HiveServer2服务 在服务器上运行以下命令:

复制代码
nohup hiveserver2 > /dev/null 2>&1 &

使用Beeline客户端连接 在客户端运行以下命令:

复制代码
beeline -u jdbc:hive2://<hostname>:10000 -n <username>

成功连接后,可以执行Hive查询操作,例如:

复制代码
show databases;
相关推荐
RestCloud1 天前
信创数据集成实践:某央企ETL全链路国产化迁移架构拆解
数据仓库·架构·数据安全·etl·etlcloud·数据传输·国产化替代
SelectDB技术团队3 天前
雨润集团 统一实时数据仓库:Apache Doris / SelectDB 的技术能力与实践
数据仓库·实时数仓·apache doris·selectdb
Irene19913 天前
剑指大数据:企业级数据仓库项目实战(金融租赁版)读书笔记__大数据测试集群的服务器节点服务分配规划表__解读(附:技术选型清单)
大数据·数据仓库·金融
Htr_4 天前
Outcome 核心概念与实战应用指南
大数据·hadoop·apache
SelectDB技术团队4 天前
抖音集团 实时数据仓库:Apache Doris / SelectDB 的技术能力与实践
数据仓库·apache
小马过河R5 天前
数据仓库入门:是什么、怎么做、和数据库有什么区别?
大数据·数据库·数据仓库·架构·驾驭工程·fde
BYSJMG5 天前
计算机毕业设计选题推荐|【基于大数据的城市噪音数据可视化分析】Spark+K-Means+FP-Growth实战
大数据·hadoop·信息可视化·spark·课程设计
慧一居士7 天前
Apache StreamPark 功能和使用场景介绍、使用步骤详细示例
数据仓库
牛奶咖啡137 天前
大数据Hadoop运维应用实践——Hadoop平台常见问题与故障汇总、系统调优、网络规划与硬件存储选型
大数据·hadoop·hadoop集群操作系统调优·hadoop集群运维问题汇总·hadoop集群硬件规划·大数据平台网络规划·大数据平台硬件存储选型
雨晨源码(同名B站)7 天前
基于Python的网易云音乐评论数据情感化分析系统 音乐爬虫信息可视化 |SnowNLP评论情感分析
开发语言·hadoop·爬虫·python·信息可视化·毕业设计