[Hive] lateral view explode

当在Hive中使用 LATERAL VIEW EXPLODE 时,

它用于将一个复杂类型(如数组或Map)的列展开成多行数据,

并将这些展开后的数据与其他列进行关联。


下面是一个简单的例子来解释 LATERAL VIEW EXPLODE 的用法:

假设有一个包含学生姓名和对应课程的表格 student_courses,其中的列 courses 是一个数组类型,表示学生所选修的课程。

复制代码
+---------+----------------------------+
| student |          courses           |
+---------+----------------------------+
|   Alice | [Math, Science, History]   |
|    Bob  | [English, Geography]       |
+---------+----------------------------+

现在我们想要将每个学生选修的课程展开成多行数据。可以使用 LATERAL VIEW EXPLODE 来实现这一点。

查询语句如下:

sql 复制代码
SELECT student, course
FROM student_courses
LATERAL VIEW EXPLODE(courses) exploded AS course;

结果将会是:

复制代码
+---------+---------+
| student |  course |
+---------+---------+
|   Alice |   Math  |
|   Alice | Science |
|   Alice | History |
|    Bob  | English |
|    Bob  |Geography|
+---------+---------+

通过 LATERAL VIEW EXPLODE,我们将每个学生的课程数组展开成了多行数据,并与原始表格的其他列保持关联。这样,我们可以更方便地处理每个学生的每门课程信息。

需要注意的是,在使用 LATERAL VIEW EXPLODE 时,

需要在表格名称后面使用别名(如上例中的 "exploded"),

以便将展开后的数据与其他列进行关联。

这样,我们可以在查询中引用新生成的列

相关推荐
计艺回忆路1 小时前
Hive自定义函数(UDF)开发和应用流程
hive·自定义函数·udf
万能小锦鲤15 小时前
《大数据技术原理与应用》实验报告三 熟悉HBase常用操作
java·hadoop·eclipse·hbase·shell·vmware·实验报告
天翼云开发者社区21 小时前
数据治理的长效机制
大数据·数据仓库
王小王-1231 天前
基于Hadoop与LightFM的美妆推荐系统设计与实现
大数据·hive·hadoop·大数据美妆推荐系统·美妆商品用户行为·美妆电商
一切顺势而行1 天前
hadoop 集群问题处理
大数据·hadoop·分布式
万能小锦鲤2 天前
《大数据技术原理与应用》实验报告七 熟悉 Spark 初级编程实践
hive·hadoop·ubuntu·flink·spark·vmware·实验报告
项目題供诗2 天前
Hadoop(二)
大数据·hadoop·分布式
Leo.yuan2 天前
ETL还是ELT,大数据处理怎么选更靠谱?
大数据·数据库·数据仓库·信息可视化·etl
万能小锦鲤2 天前
《大数据技术原理与应用》实验报告五 熟悉 Hive 的基本操作
hive·hadoop·ubuntu·eclipse·vmware·实验报告·hiveql
張萠飛2 天前
flink sql如何对hive string类型的时间戳进行排序
hive·sql·flink