数据仓库ODS、DWD、DWR、DM、DIM各层介绍

数据仓库并不是数据的最终目的地,而是为数据最终的目的地做好准备,这些准备包含:清洗、转义、分类、重组、合并、拆分、统计等。

每个公司可根据自己的业务需求分为不同的层次。目前比较成熟的数据分层

ODS层(Operation Data Store )数据操作层,也称为贴源层,它是数据平台的"原始数据池"。数据从各个业务系统(如ERP、CRM)几乎实时或准实时地同步到这里。

DWD层(Data Warehouse Detail )明细数据层,负责清洗、整合ODS层数据,也是数据仓库的基础层。

DWR层 (Data Warehouse Report / Data Warehouse Processing) - 数据报告/加工层,基于DWD层的明细数据,进行轻度汇总或预连接,生成面向特定业务场景或分析主题的宽表。

DM层(Data Mart)数据集市层,基于DWD层或DWR基础上构建主题宽表,支持特定业务分析需求。 ‌

DIM层(Dimension)维度信息层,统一管理维度表(如时间、地区等),用于关联事实表和分析

相关推荐
云策数链3 天前
ERP报表系统设计与数据仓库
数据仓库·erp·用友·云策数链
水火既济__3 天前
加快hive效率
数据仓库·hive·hadoop
真上帝的左手4 天前
19. 大数据-数据仓库简介
大数据·数据仓库
zgdlsz6 天前
羲之文化传承人王杰宝:沉厚笔墨间的守正出新
大数据·数据库·数据仓库·涛思数据
莽撞的大地瓜6 天前
舆情分析智能体:蜜度新浪舆情通以多Agent协同驱动全流程智能升级
大数据·数据仓库·数据分析
陆水A8 天前
用CASE WHEN实现横向迭代,节点数据串行推算
大数据·数据仓库·数据库开发·etl·etl工程师
承渊政道8 天前
从ROWNUM到LIMIT:KES、Oracle与PostgreSQL的执行顺序差异解析
数据库·数据仓库·sql·mysql·安全·postgresql·oracle
青春万岁!!8 天前
hive模型数据异常-作业调度问题
大数据·数据仓库·hive
白日与明月9 天前
Hive分桶机制应用
数据仓库·hive·hadoop
承渊政道9 天前
数据删了不等于销毁:KingbaseES敏感数据物理擦除实战指南
运维·服务器·数据库·数据仓库·安全·oracle·业界资讯