【大数据进阶第三阶段之Hive学习笔记】Hive常用命令和属性配置

目录

1、Hive安装

2、HiveJDBC访问

2.1、启动hiveserver2服务

2.2、连接hiveserver2服务

2.3、注意

3、Hive常用交互命令

3.1、"-e"不进入hive的交互窗口执行sql语句

3.2、"-f"执行脚本中sql语句

4、Hive其他命令操作

4.1、退出hive窗口

[4.2、在hive cli命令窗口中如何查看hdfs文件系统](#4.2、在hive cli命令窗口中如何查看hdfs文件系统)

[4.3、在hive cli命令窗口中如何查看本地文件系统](#4.3、在hive cli命令窗口中如何查看本地文件系统)

5、Hive常见属性配置

5.1、数据仓库位置配置

5.2、查询后信息显示配置

5.3、运行日志信息配置


1、Hive安装

【大数据进阶第三阶段之Hive学习笔记】Hive安装-CSDN博客

2、HiveJDBC访问

2.1、启动hiveserver2服务

启动:hiveserver2

2.2、连接hiveserver2服务

新建命令窗口,输入以下命令

beeline -u "jdbc:hive2://localhost:10000"

出现该图代表成功连接:

2.3、注意

这里报错通常是由于权限不够,只需要对tmp和opt文件夹赋权即可

hadoop fs -chmod -R 777 /tmp

hadoop fs -chmod -R 777 /opt

3、Hive常用交互命令

3.1、"-e"不进入hive的交互窗口执行sql语句

hive -e "查询语句"

3.2、"-f"执行脚本中sql语句

hive -f sql文件路径/sql文件名称

执行文件中的sql语句并将结果写入文件中

hive -f sql文件路径/sql文件名称 > 保存结果的路径

4、Hive其他命令操作

4.1、退出hive窗口

exit;

quit;

4.2、在hive cli命令窗口中如何查看hdfs文件系统

dfs -ls /;

4.3、在hive cli命令窗口中如何查看本地文件系统

!ls /opt;

5、Hive常见属性配置

5.1、数据仓库位置配置

修改hive-site.xml文件的value

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/opt/hive/warehouse</value>

</property>

5.2、查询后信息显示配置

在hive-site.xml文件中添加如下配置信息,就可以实现显示当前数据库,以及查询表的头信息配置。

<property>

<name>hive.cli.print.header</name>

<value>true</value>

</property>

<property>

<name>hive.cli.print.current.db</name>

<value>true</value>

</property>

重新启动hive,对比配置前后差异。

5.3、运行日志信息配置

Hive的log默认存放在/tmp/root/hive.log目录下(root为当前用户名)

修改hive的log存放日志到/opt/hive/logs

1.修改/opt/hive/conf/hive-log4j.properties.template文件名称为hive-log4j.properties

mv hive-log4j.properties.template hive-log4j.properties

2.在hive-log4j.properties文件中修改log存放位置

hive.log.dir=/opt/hive/logs

重启hive

相关推荐
字节跳动数据平台16 小时前
代码量减少 70%、GPU 利用率达 95%:火山引擎多模态数据湖如何释放模思智能的算法生产力
大数据
得物技术17 小时前
深入剖析Spark UI界面:参数与界面详解|得物技术
大数据·后端·spark
武子康19 小时前
大数据-238 离线数仓 - 广告业务 Hive分析实战:ADS 点击率、购买率与 Top100 排名避坑
大数据·后端·apache hive
武子康2 天前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据·后端·apache hive
大大大大晴天2 天前
Flink生产问题排障-Kryo serializer scala extensions are not available
大数据·flink
武子康4 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据·后端·apache hive
武子康5 天前
大数据-235 离线数仓 - 实战:Flume+HDFS+Hive 搭建 ODS/DWD/DWS/ADS 会员分析链路
大数据·后端·apache hive
DianSan_ERP5 天前
电商API接口全链路监控:构建坚不可摧的线上运维防线
大数据·运维·网络·人工智能·git·servlet
够快云库5 天前
能源行业非结构化数据治理实战:从数据沼泽到智能资产
大数据·人工智能·机器学习·企业文件安全
西岸行者5 天前
学习笔记:SKILLS 能帮助更好的vibe coding
笔记·学习