数据仓库ODS、DWD、DWR、DM、DIM各层介绍

数据仓库并不是数据的最终目的地,而是为数据最终的目的地做好准备,这些准备包含:清洗、转义、分类、重组、合并、拆分、统计等。

每个公司可根据自己的业务需求分为不同的层次。目前比较成熟的数据分层

ODS层(Operation Data Store )数据操作层,也称为贴源层,它是数据平台的"原始数据池"。数据从各个业务系统(如ERP、CRM)几乎实时或准实时地同步到这里。

DWD层(Data Warehouse Detail )明细数据层,负责清洗、整合ODS层数据,也是数据仓库的基础层。

DWR层 (Data Warehouse Report / Data Warehouse Processing) - 数据报告/加工层,基于DWD层的明细数据,进行轻度汇总或预连接,生成面向特定业务场景或分析主题的宽表。

DM层(Data Mart)数据集市层,基于DWD层或DWR基础上构建主题宽表,支持特定业务分析需求。 ‌

DIM层(Dimension)维度信息层,统一管理维度表(如时间、地区等),用于关联事实表和分析

相关推荐
走遍西兰花.jpg1 天前
hive如何使用python脚本
数据仓库·hive·hadoop·python
沃达德软件1 天前
智慧监管新形态:科技赋能
大数据·数据仓库·人工智能·科技·数据库架构
青云交1 天前
Java 大视界 -- Java+Spark 构建离线数据仓库:分层设计与 ETL 开发实战(445)
java·数据仓库·spark·分层设计·java+spark·离线数据仓库·etl 开发
zgl_200537791 天前
源代码:ZGLanguage 解析SQL数据血缘 之 显示 WITH SQL 结构图
大数据·数据库·数据仓库·sql·数据治理·etl·数据血缘
m0_748252381 天前
ervlet 编写过滤器
数据仓库·hive·hadoop
xiaomici2 天前
SAC Planning 高级计算公式-2
数据仓库
沃达德软件2 天前
智慧政工中心功能解析
大数据·数据仓库·数据库开发·数据库架构·etl工程师
温暖小土2 天前
ClickHouse vs Apache Doris:2026年实时OLAP数据库选型深度解析
数据库·数据仓库·clickhouse·apache
沃达德软件2 天前
警务指挥情报中心建设
大数据·数据仓库·数据库开发
zgl_200537792 天前
源代码:ZGLanguage 解析SQL数据血缘 之 显示 UNION SQL 结构图
大数据·数据库·数据仓库·sql·数据治理·sql解析·数据血缘