数据治理-数据仓库环境

数据仓库环境包括一系列组织起来以满足企业需求的架构组件,从源系统流动到数据暂存区,数据可以在这里被清晰,当数据集成并存储在数据仓库或操作数据存储中时,可以对其进行补充丰富。在数据仓库中,可以通过数据集市或数据立方体访问数据,生成各种各样的报表。

其中包括:

  1. 源系统;(CRM\账务系统或者DaaS服务、网页内容和任何大数据计算结果 )
  2. 数据集成;(ETL\数据虚拟化以及将数据转换为通用格式和位置的其他技术);
  3. 数据存储区域(暂存区、参考数据和主数据一致性维度、中央数据仓库)
  4. 操作型数据存储(ODS)。操作型数据存储是中央持久存储的一个解决方案,它能支持较低的延迟,因此可以支持业务应用。
  5. 数据集市。数据集市是一种数据存储,通常用于支持数据仓库环境的展示层;
  6. 数据立方体。存在三种经典的支持在线分析处理系统实现方法:基于关系数据库的、基于多维数据库及混合型存储结构的,它们的名称与底层数据库类型有关。
  7. 加载处理的方式。
相关推荐
大大大大晴天3 天前
Hudi Metadata Table 与 Hive Sync (HMS)怎么选?
大数据
手可摘星辰7773 天前
一次线上FlinkCDC异常排查复盘
大数据·flink
大大大大晴天3 天前
Hudi技术内幕:Metadata Table原理与实践
大数据
大大大大晴天4 天前
Hudi技术内幕:深入解析Index索引机制
大数据
阿里云大数据AI技术4 天前
Flink Forward Asia 2026 深圳启幕:Agentic Streaming for AI,开启实时智能新范式
大数据·flink
SelectDB5 天前
阶跃星辰基于 SelectDB 构建 PB 级 Agent 可观测平台
大数据·数据库·aigc
大大大大晴天8 天前
Hudi技术内幕:RecordPayload到RecordMerger
大数据
SelectDB9 天前
秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率
大数据·后端·云原生
WhoAmI9 天前
MapReduce框架原理解析一:InputFormat
大数据·hadoop
WhoAmI9 天前
MapReduce框架原理解析三:OutputFormat
大数据·hadoop