idea连接hive

在hadoop平台写hive命令容易出错,但在idea中写hive命令可以提示代码,代码写错还可以提示错误,所以选择在idea中写hive命令。

实验环境hadoop2.8.3 hive2.1.1 idea2019

1.在idea中构建一个maven项目,引入相关依赖,并且相关依赖版本号与hive,hadoop的版本号一致

XML 复制代码
<!--hive相关依赖-->
<dependency>
	<groupId>org.apache.hive</groupId>
	<artifactId>hive-jdbc</artifactId>
	<version>2.1.1</version>
</dependency>
<!--hadoop相关依赖-->
<dependency>
	<groupId>org.apache.hadoop</groupId>
	<artifactId>hadoop-common</artifactId>
	<version>2.8.3</version>
</dependency>

2.在hadoop平台配置core-site.xml文件和hive的hive-site.xml文件

core-site.xml

XML 复制代码
<!--远程登录 hive -->
<!--下面的 hadoop 是用户名和用户组,用自己的就可以-->
<property>
        <name>hadoop.proxyuser.hadoop.hosts</name>
        <value>*</value>
</property>

<property>
        <name>hadoop.proxyuser.hadoop.groups</name>
        <value>*</value>
</property>

hive-site.xml

XML 复制代码
<!-- 指定 hiveserver2 连接的 host -->
<property>
        <name>hive.server2.thrift.bind.host</name>
        <value>master</value>
</property>
    
<!-- 指定 hiveserver2 连接的端口号 -->
<property>
        <name>hive.server2.thrift.port</name>
        <value>10000</value> 
</property>

3.启动hive,注意启动hive之前需要先启动mysql、hdfs等依赖项

bash 复制代码
hive --service hiveserver2

4.使用idea中的Database工具

需要导入的jar包可以在hadoop平台中hadoop软件和hive软件中找到

5.效果

相关推荐
树码小子14 小时前
开启 IDEA 中的断言功能
android·java·intellij-idea
牛奶咖啡1318 小时前
大数据Hadoop运维应用实践——Hadoop平台常见问题与故障汇总、系统调优、网络规划与硬件存储选型
大数据·hadoop·hadoop集群操作系统调优·hadoop集群运维问题汇总·hadoop集群硬件规划·大数据平台网络规划·大数据平台硬件存储选型
雨晨源码(同名B站)19 小时前
基于Python的网易云音乐评论数据情感化分析系统 音乐爬虫信息可视化 |SnowNLP评论情感分析
开发语言·hadoop·爬虫·python·信息可视化·毕业设计
FlyWIHTSKY1 天前
idea中集成claude功能
java·ide·人工智能·intellij-idea·cloudera
赤土 炙焱1 天前
hiveserver2启动失败,磁盘满了
hive·hadoop
Francek Chen2 天前
【大数据处理与分析】数据仓库Hive:02 数据湖
大数据·数据仓库·hive·hadoop·分布式·数据分析
Blossom i4 天前
Python+spark2.0+Hadoop机器学习与大数据实战第十一章:Python Spark的集成开发环境
大数据·hadoop·spark
我要用代码向我喜欢的女孩表白5 天前
hdfs获取所有路径大小的脚本
大数据·hadoop·hdfs
Waay5 天前
什么是HBase?它和Hive有什么区别?
大数据·数据库·hive·hadoop·hdfs·hbase
浪客川5 天前
使用 IDEA 生成API文档
java·ide·intellij-idea