数据仓库ODS、DWD、DWR、DM、DIM各层介绍

数据仓库并不是数据的最终目的地,而是为数据最终的目的地做好准备,这些准备包含:清洗、转义、分类、重组、合并、拆分、统计等。

每个公司可根据自己的业务需求分为不同的层次。目前比较成熟的数据分层

ODS层(Operation Data Store )数据操作层,也称为贴源层,它是数据平台的"原始数据池"。数据从各个业务系统(如ERP、CRM)几乎实时或准实时地同步到这里。

DWD层(Data Warehouse Detail )明细数据层,负责清洗、整合ODS层数据,也是数据仓库的基础层。

DWR层 (Data Warehouse Report / Data Warehouse Processing) - 数据报告/加工层,基于DWD层的明细数据,进行轻度汇总或预连接,生成面向特定业务场景或分析主题的宽表。

DM层(Data Mart)数据集市层,基于DWD层或DWR基础上构建主题宽表,支持特定业务分析需求。 ‌

DIM层(Dimension)维度信息层,统一管理维度表(如时间、地区等),用于关联事实表和分析

相关推荐
虚幻如影2 小时前
Hive 中“STRING类型无需显式指定长度
数据仓库·hive·hadoop
荒川之神11 小时前
Oracle 数据仓库雪花模型设计(完整实战方案)
数据库·数据仓库·oracle
RestCloud13 小时前
2026年企业级ETL工具选型指南:从开源DataX到商业化ETLCloud的演进
数据仓库·开源·etl·datax·数据处理·数据集成·数据传输
荒川之神13 小时前
Oracle 数据仓库星座模型(Galaxy Model)设计原则
数据库·数据仓库·oracle
瀚高PG实验室16 小时前
ETL中,分区表子表未及时收集统计信息,导致sql执行耗时很长
数据库·数据仓库·sql·etl·瀚高数据库
荒川之神16 小时前
Oracle 数据仓库雪花模型设计原则(核心 + 落地 + Oracle 数据库适配)
数据库·数据仓库·oracle
荒川之神16 小时前
Oracle 数据仓库星型模型设计原则
数据库·数据仓库·oracle
AllData公司负责人2 天前
AllData数据中台通过集成开源项目Apache IOTDB Web相关项目,建设物联网数据库平台
数据仓库·物联网·时序数据库·iotdb·工业物联网·apache iotdb·物联网数据库平台
Leo.yuan2 天前
数据仓库是什么?数据仓库和BI有什么区别?
数据仓库
heimeiyingwang3 天前
【架构实战】ETL架构演进:从批处理到实时流处理
数据仓库·架构·etl