Hive的使用技巧

一.Hive常用交互命令

bash 复制代码
[zhangflink@flinkv1 hive]$ bin/hive -help

1.在Hive命令行里创建一个表student,并插入1条数据


2."-e"不进入hive的交互窗口执行hql语句

3."-f"执行脚本中的hql语句

二. Hive参数配置方式

1.查看当前所有的配置信息

bash 复制代码
hive> set;

2.参数的配置三种方式

(1)配置文件方式

默认配置文件:hive-default.xml

用户自定义配置文件:hive-site.xml

注意:用户自定义配置会覆盖默认配置。另外,Hive也会读入Hadoop的配置,因为Hive是作为Hadoop的客户端启动的,Hive的配置会覆盖Hadoop的配置。

注意:配置文件的设定对本机启动的所有Hive进程都有效。

(2)命令行参数方式

bash 复制代码
[zhangflink@flinkv1 hive]$ bin/hive -hiveconf mapreduce.job.reduces=10;
bash 复制代码
hive> set mapreduce.job.reduces;

注意:仅对本次Hive启动有效。

(3)参数声明方式

bash 复制代码
hive> set mapreduce.job.reduces=5;
hive> set mapreduce.job.reduces;

配置文件 < 命令行参数 < 参数声明

三.Hive常见属性配置

1.Hive客户端显示当前库和表头

配置前:

在hive-site.xml中加入如下两个配置:

bash 复制代码
<property>
    <name>hive.cli.print.header</name>
    <value>true</value>
    <description>Whether to print the names of the columns in query output.</description>
</property>
<property>
    <name>hive.cli.print.current.db</name>
    <value>true</value>
    <description>Whether to include the current database in the Hive prompt.</description>
</property>

加入配置后显示表头:

2.Hive运行日志路径配置

bash 复制代码
[zhangflink@flinkv1 conf]$ mv hive-log4j2.properties.template hive-log4j2.properties
[zhangflink@flinkv1 conf]$ vim hive-log4j2.properties

重新启动日志路径已经出现在配置的路径

相关推荐
Y3815326621 天前
3 种 SERP 数据 ETL 方案对比:实时 / 定时 / 流式
数据仓库·etl
向夏威夷 梦断明暄2 天前
基于Tez引擎的 Hive SQL 性能优化
hive·sql·性能优化
这个DBA有点耶3 天前
交易型数据库是什么?OLTP核心能力与2026选型指南
数据库·数据仓库·sql·database·数据库架构·olap·dba
RestCloud4 天前
Informatica迁移国产ETL完整实施指南:ETLCloud自动化平滑替换方案
数据仓库·etl·etlcloud·数据传输·数据集成工具·informatica·国产化替代
德昂信息dataondemand4 天前
全量还是增量?聊聊数仓ETL中的数据同步策略
数据仓库·etl
观远数据5 天前
数据集成平台选型战卡:DataFlow对比传统ETL的5个维度与红线排除项
数据仓库·etl
Database_Cool_5 天前
云数据仓库开通指南:阿里云 AnalyticDB MySQL 10 分钟从 0 到分析实战教程
数据仓库·mysql·阿里云
罗政7 天前
基于AI工作流的多渠道销售数据仓库清洗统计实践
数据仓库
迈巴赫车主8 天前
湖仓一体(Data Lakehouse)简介
大数据·数据仓库·数据湖·湖仓一体