数据仓库基础

ODS(Operational Data Store)层:操作数据存储。存放原始数据,直接加载原始日志、数据,起到备份数据的作用。数据采用压缩,减少磁盘存储空间。创建分区表,防止后续的全表扫描。

DWD(data warehouse detail 细节数据层):对核心数据进行判空过滤,对业务数据采用维度模型重新建模,即维度退化

DWS(data warehouse service 服务数据层):以DWD为基础,按天进行轻度汇总,一般是宽表

DWT(data warehouse topic 数据主题层):以DWS为基础,按主题进行汇总

ADS(Application Data Store 数据应用层):为各种统计报表提供数据

相关推荐
字节数据平台9 小时前
基于OLAP湖仓一体架构,火山引擎ByteHouse助力企业降本提效
数据仓库·火山引擎
isNotNullX10 小时前
数据仓库还是数据集市?这俩怎么选?
大数据·数据仓库·分布式·etl
hamish-wu13 小时前
Dolphinscheduler配置dataX离线采集任务写入hive实践(二)
数据仓库·hive·hadoop
朽木自雕,格物致知!19 小时前
hive分区表
数据仓库·hive·hadoop
isNotNullX19 小时前
数据网格能替代数据仓库吗?
大数据·数据库·数据仓库·etl·数据同步·数据网格
hamish-wu19 小时前
dolphin 配置data 从文件导入hive 实践(一)
数据仓库·hive·hadoop
Yz987619 小时前
Hive的远程模式
大数据·linux·数据仓库·hive·hadoop·分布式·big data
isNotNullX1 天前
数据集市是什么?有什么优势?
大数据·数据库·数据仓库·etl
duration~1 天前
ServletContext介绍
数据仓库·hive·hadoop
宝哥大数据1 天前
酒店行业数据仓库
数据仓库