数据仓库和数据建模中,维度表、度量表、事实表和大宽表是什么

在数据仓库和数据建模中,维度表、度量表、事实表和大宽表是常用的术语,它们各自扮演着不同的角色。下面是对每个概念的详细解释。

1. 维度表 (Dimension Table)

定义:维度表是用来存储描述性信息的表,通常包含对业务实体的属性。这些属性可以是用来进行数据分析和查询的上下文信息。

主要特征

  • 包含离散的、分类的数据,如时间、地点、产品等。
  • 通常具有较少的记录,但字段数量较多。
  • 用于提供可供分析的上下文信息。

示例: 一个产品维度表 dim_product 可能包含以下字段:

  • product_id:产品ID(主键)
  • product_name:产品名称
  • category:产品类别
  • brand:品牌

2. 度量表 (Measure Table)

定义:度量表是一个专门用于存储数值型数据(度量)的表。这些数值一般是可以被度量或聚合的,如销售额、收入、利润等。

主要特征

  • 通常不独立存在,而是依赖于事实表。
  • 记录中包含的数值用于计算和分析。
  • 可以与维度表进行连接,以便进行多维分析。

示例: 一个销售度量表可能包含以下字段:

  • sales_amount:销售金额
  • sales_quantity:销售数量

3. 事实表 (Fact Table)

定义:事实表是数据仓库中的核心表,存储了与业务事件相关的度量数据和维度的外键。它包含了可以分析和计算的关键业务指标。

主要特征

  • 存储大量的、原始的、可量化的业务数据。
  • 包含对维度表的外键,以便与维度信息关联。
  • 通常行数较多,但字段数量相对较少。

示例: 一个销售事实表 fact_sales 可能包含以下字段:

  • sales_id:销售记录ID(主键)
  • time_id:时间维度的外键
  • region_id:地区维度的外键
  • product_id:产品维度的外键
  • customer_id:客户维度的外键
  • sales_amount:销售金额
  • sales_quantity:销售数量

4. 大宽表 (Wide Table)

定义:大宽表是一个包含多个维度和事实的扁平化表,通常是通过将多个维度表与事实表连接而形成的。这种表可以提供一个整合的视图,使得在查询时更方便。

主要特征

  • 通常具有多列(字段),因为它集成了多个维度的属性和事实数据。
  • 可以减少多表连接的复杂性,提高查询性能。
  • 适合 OLAP(在线分析处理)场景,尤其在数据挖掘和分析时。

示例: 一个可能的大宽表 v_sales_report 可以由销售事实表和维度表连接而成,包含字段如:

  • year:年份
  • quarter:季度
  • month:月份
  • country:国家
  • province:省份
  • city:城市
  • category:产品类别
  • brand:品牌
  • customer_type:客户类型
  • total_sales_amount:总销售金额
  • total_sales_quantity:总销售数量

总结

  • 维度表:提供上下文信息(如时间、地点、产品等),通常包含描述性数据。
  • 度量表:主要存储用于分析的数值型数据,通常与事实表关联。
  • 事实表:存储与业务事件相关的度量数据及其与维度的关系,是数据仓库的核心。
  • 大宽表:将多个维度和事实结合在一起的扁平化数据表,以便于快速查询和多维分析。

这些概念是数据仓库设计中非常重要的组成部分,有助于实现高效的数据存储和分析。

https://zhengkai.blog.csdn.net/

相关推荐
武子康12 小时前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据·后端·apache hive
大大大大晴天14 小时前
Flink生产问题排障-Kryo serializer scala extensions are not available
大数据·flink
武子康3 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据·后端·apache hive
武子康4 天前
大数据-235 离线数仓 - 实战:Flume+HDFS+Hive 搭建 ODS/DWD/DWS/ADS 会员分析链路
大数据·后端·apache hive
DianSan_ERP4 天前
电商API接口全链路监控:构建坚不可摧的线上运维防线
大数据·运维·网络·人工智能·git·servlet
够快云库4 天前
能源行业非结构化数据治理实战:从数据沼泽到智能资产
大数据·人工智能·机器学习·企业文件安全
AI周红伟4 天前
周红伟:智能体全栈构建实操:OpenClaw部署+Agent Skills+Seedance+RAG从入门到实战
大数据·人工智能·大模型·智能体
B站计算机毕业设计超人4 天前
计算机毕业设计Django+Vue.js高考推荐系统 高考可视化 大数据毕业设计(源码+LW文档+PPT+详细讲解)
大数据·vue.js·hadoop·django·毕业设计·课程设计·推荐算法
计算机程序猿学长4 天前
大数据毕业设计-基于django的音乐网站数据分析管理系统的设计与实现(源码+LW+部署文档+全bao+远程调试+代码讲解等)
大数据·django·课程设计
B站计算机毕业设计超人4 天前
计算机毕业设计Django+Vue.js音乐推荐系统 音乐可视化 大数据毕业设计 (源码+文档+PPT+讲解)
大数据·vue.js·hadoop·python·spark·django·课程设计