数据总线/一致性维度/总线矩阵

数据孤岛

企业内部各个系统中的数据被隔离在不同的数据库中,无法进行共享和整合,严重影响了企业的决策能力和运营效率。

数据仓库数据总线

一种技术解决方案,旨在实现数据仓库与各个数据源之间的数据集成、交换和共享,通常做法是将所有的数据源连接到一条共享的数据总线上。

数据总线通过建立数据集成层,实现了不同数据源之间的数据传输和转换,从而打破数据孤岛,实现数据共享。

数据总线连接多个数据源,并将数据按照一定的规则进行清洗、转换和加工,提升数据质量和一致性,最终将数据加载到数据仓库中。

这样,企业就可以在数据仓库内部进行全面的数据分析和决策支持。

一致性维度

在同一个集市内,一致性维度的意思是两个维度如果有关系,要么就是完全一样的,要么就是一个维度在数学意义上是另一个维度的子集

维度保持一致后,事实就可以保存在各个数据集市中。虽然在物理上是独立的,但在逻辑上由一致性维度使所有的数据集市是联系在一起,随时可以进行交叉探察等操作,也就组成了数据仓库。

总结

总线矩阵:业务过程和维度的交点

一致性维度:同一集市的维度表,内容相同或包含

一致性事实:不同集市的同一事实,需保证口径一致,单位统一

参考

数据仓库数据总线

https://www.guandata.com/gy/post/12498.html

一篇文章搞懂数据仓库:总线架构、一致性维度、一致性事实

https://developer.aliyun.com/article/931916

相关推荐
心灵Haven3 小时前
Hive之最新方式MySQL5.7 安装
数据仓库·hive·hadoop
korry243 小时前
hive数仓的分层与建模
数据仓库·hive·hadoop
专注API从业者18 小时前
反向海淘独立站未来发展趋势:机遇与挑战并存,如何抢占先机?
大数据·开发语言·前端·数据仓库
心灵Haven19 小时前
Hive之[Hive]详细安装步骤
数据仓库·hive·hadoop
lj90772264419 小时前
nexus部署及配置https访问
数据仓库·网络协议·http·docker·https
大数据魔法师1 天前
HiveQL命令(三)- Hive函数
数据仓库·hive·hadoop
小杜谈数1 天前
HIVE如何注册UDF函数
数据仓库·hive·hadoop
数据媛1 天前
数据仓库和商务智能:洞察数据,驱动决策
数据仓库·cdga·cdgp·dama·数据治理·数据管理·商务智能
lisacumt3 天前
【hive】记一次hiveserver内存溢出排查,线程池未正确关闭导致
数据仓库·hive·hadoop