Hive-拉链表的设计与实现
在Hive中,拉链表专门用于解决在数据仓库中数据发生变化如何实现数据存储的问题。
1.数据同步问题
Hive在实际工作中主要用于构建离线数据仓库,定期的从各种数据源中同步采集数据到Hive中,经过分层转换提供数据应用。
解决方案
(1)直接更新
(2)全量快照
(3)构建拉链表
2.拉链表的设计
在Hive中,拉链表专门用于解决在数据仓库中数据发生变化如何实现数据存储的问题。
Hive在实际工作中主要用于构建离线数据仓库,定期的从各种数据源中同步采集数据到Hive中,经过分层转换提供数据应用。