[Hive] lateral view explode

言之。2023-10-24 22:18

当在Hive中使用 LATERAL VIEW EXPLODE 时，

它用于将一个复杂类型（如数组或Map）的列展开成多行数据，

并将这些展开后的数据与其他列进行关联。

下面是一个简单的例子来解释 LATERAL VIEW EXPLODE 的用法：

假设有一个包含学生姓名和对应课程的表格 student_courses，其中的列 courses 是一个数组类型，表示学生所选修的课程。

复制代码

+---------+----------------------------+
| student |          courses           |
+---------+----------------------------+
|   Alice | [Math, Science, History]   |
|    Bob  | [English, Geography]       |
+---------+----------------------------+

现在我们想要将每个学生选修的课程展开成多行数据。可以使用 LATERAL VIEW EXPLODE 来实现这一点。

查询语句如下：

sql 复制代码

SELECT student, course
FROM student_courses
LATERAL VIEW EXPLODE(courses) exploded AS course;

结果将会是：

复制代码

+---------+---------+
| student |  course |
+---------+---------+
|   Alice |   Math  |
|   Alice | Science |
|   Alice | History |
|    Bob  | English |
|    Bob  |Geography|
+---------+---------+

通过 LATERAL VIEW EXPLODE，我们将每个学生的课程数组展开成了多行数据，并与原始表格的其他列保持关联。这样，我们可以更方便地处理每个学生的每门课程信息。

需要注意的是，在使用 LATERAL VIEW EXPLODE 时，

需要在表格名称后面使用别名（如上例中的 "exploded"），

以便将展开后的数据与其他列进行关联。

这样，我们可以在查询中引用新生成的列。