【大数据 复习】第9章 数据仓库分析工具Hive

一、概念

1.概述

(1)Hive是一个构建于Hadoop顶层的数据仓库工具。

(2)某种程度上可以看作是用户编程接口,本身不存储和处理数据。

(3)依赖分布式文件系统HDFS存储数据。

(4)依赖分布式并行计算模型MapReduce处理数据。

(5)定义了简单的类SQL 查询语言------HiveQL。

(6)用户可以通过编写的HiveQL语句运行MapReduce任务。

(7)Hive需要把HiveQL语句转换成MapReduce任务进行运行。

(8)Hive具有的特点非常适用于数据仓库。

(9)是一个可以提供有效、合理、直观组织和使用数据的模型。

2.联系:

(1)Hive依赖于HDFS 存储数据。

(2)Hive依赖于MapReduce 处理数据。

(3)Pig可以作为Hive的替代工具

pig是一种数据流语言和运行环境,适合用于查询半结构化数据集。常用于ETL过程的一部分,即将外部数据装载到Hadoop集群中,然后转换为用户期待的数据格式。

(4)HBase 提供数据的实时访问,而Hive只能处理静态数据,主要是BI报表数据,所以HBase与Hive的功能是互补的。

3.Hive与传统数据库的对比

4.Hive组成模块

(1)用户接口模块

(2)驱动模块:包括编译器、优化器、执行器等。

(3)元数据存储模块(Metastore):是一个独立的关系型数据库,通常是与MySQL数据库连接后创建的一个MySQL实例,也可以是Hive自带的derby数据库实例。

二、习题

1.判断题 (1分)

Hive中的元数据存储模块是一个独立的关系型数据库。( )

正确答案: 正确

2.判断题 (1分)

Hive需要把HiveQL语句转换成MapReduce任务进行运行。( )

正确答案: 正确

3.判断题 (1分)

传统的数据库提供分区功能来改善大型表以及具有各种访问模式的表的可伸缩性,可管理性和提高数据库效率。Hive不支持分区功能,不使用分区使用索引可以加快数据的查询速度。( )

正确答案: 错误

Hive支持分区功能

4.判断题 (1分)

Hive同时支持导入单条数据和批量数据。( )

正确答案: 错误

5.判断题 (1分)

Hive是一个构建于Hadoop顶层的数据仓库工具,本身不存储和处理数据。( )

正确答案: 正确

相关推荐
学着改变2756 分钟前
2026便携式超声波流量计性能白皮书 户外巡检适用性横评
大数据·网络·人工智能·科技·产品运营·量子计算
智途 Tech36 分钟前
2026年分析多个Excel、CSV和网页数据的AI工具清单:Tabbit 浏览器多源引用
大数据·人工智能·excel
龙亘川1 小时前
数智赋能退役军人服务:V1.0 系统搭建全生命周期闭环服务体系
大数据·数据库·人工智能
Tongzhi20262 小时前
通芝科技考勤软件三大发展趋势:AI大模型、无感识别与数据底座
大数据·科技·算法·爬山算法
智购科技自动售卖机厂家2 小时前
2026自动售货机库存热力图分析:从设备分布到补货优先级的数据可视化实践~YH
大数据·python·信息可视化
SelectDB技术团队2 小时前
Apache Doris 5.0 年度版本前瞻(一):构建统一的多模湖仓实时分析平台
大数据·doris·数据湖·湖仓一体·lakehouse·湖仓分析·多模分析
eBest数字化转型方案2 小时前
Route Optimization for FMCG:多目标排线算法的工程实现
大数据·人工智能·算法
Han.miracle3 小时前
Elasticsearch深度分页问题完整解析
大数据·elasticsearch·搜索引擎
小柯南敲键盘3 小时前
跨境电商批量图片翻译与视频字幕翻译,就用跨马AI工具
大数据·人工智能·python·音视频
GlobalInfo3 小时前
正文回答“是什么”,附录回答“为什么是这样”
大数据·人工智能