数据总线/一致性维度/总线矩阵

数据孤岛

企业内部各个系统中的数据被隔离在不同的数据库中,无法进行共享和整合,严重影响了企业的决策能力和运营效率。

数据仓库数据总线

一种技术解决方案,旨在实现数据仓库与各个数据源之间的数据集成、交换和共享,通常做法是将所有的数据源连接到一条共享的数据总线上。

数据总线通过建立数据集成层,实现了不同数据源之间的数据传输和转换,从而打破数据孤岛,实现数据共享。

数据总线连接多个数据源,并将数据按照一定的规则进行清洗、转换和加工,提升数据质量和一致性,最终将数据加载到数据仓库中。

这样,企业就可以在数据仓库内部进行全面的数据分析和决策支持。

一致性维度

在同一个集市内,一致性维度的意思是两个维度如果有关系,要么就是完全一样的,要么就是一个维度在数学意义上是另一个维度的子集

维度保持一致后,事实就可以保存在各个数据集市中。虽然在物理上是独立的,但在逻辑上由一致性维度使所有的数据集市是联系在一起,随时可以进行交叉探察等操作,也就组成了数据仓库。

总结

总线矩阵:业务过程和维度的交点

一致性维度:同一集市的维度表,内容相同或包含

一致性事实:不同集市的同一事实,需保证口径一致,单位统一

参考

数据仓库数据总线

https://www.guandata.com/gy/post/12498.html

一篇文章搞懂数据仓库:总线架构、一致性维度、一致性事实

https://developer.aliyun.com/article/931916

相关推荐
闯闯桑15 小时前
hive 中优化性能的一些方法
数据仓库·hive·hadoop
闯闯桑16 小时前
hive 中可能产生小文件的场景
数据仓库·hive·hadoop
RestCloud1 天前
ETL与ELT核心技术解析:如何选择最优数据集成方案
数据仓库·etl·数字化转型·数据集成工具·elt
weixin_307779132 天前
Visual Studio 2022和C++实现带多组标签的Snowflake SQL查询批量数据导出程序
开发语言·c++·数据仓库·sql·云计算
精神病不行计算机不上班3 天前
【数据仓库与数据挖掘基础】第二章 数据仓库原理
数据仓库·数据挖掘·spark
Data-Miner4 天前
31页PPT解析数据湖架构、数据湖和数据仓库的区别、湖仓一体化湖仓一体建设解决方案
大数据·数据仓库
Lowe-小码4 天前
Hive-基础入门
数据仓库·hive·hadoop
闯闯桑4 天前
hive 中各种参数
数据仓库·hive·hadoop
精神病不行计算机不上班5 天前
【数据仓库与数据挖掘基础】第一章 概论/基础知识
数据仓库·数据挖掘
乙卯年QAQ5 天前
【Hive】Hive安装
数据仓库·hive·hadoop