数据仓库的概念

先用大白话讲一下,数据仓库的主要目的就是存储和分析大量结构化数据的。

> 那么它的核心目的是:支持商业智能(BI)和决策支持系统,也就是说,它不仅仅是为了存储,更重要的是为了分析提供便利。

> 再来说下它的特点:面向主题的、集成的、相对稳定的、随时间变化的。而这些特点恰恰反应了数据仓库与传统数据库的区别。

> 这里就要先讲一下OLTP(联机事务处理)OLAP(联机分析处理)的区别

> 1.数据更新:OLTP系统的数据经常被更新,数据仓库的数据相对稳定,通常只定期加载。

> 2.数据模型:OLTP系统通常使用高度规范化的模型;数据仓库通常使用星型或雪花模型

> 3.查询类型:OLTP系统主要处理简单、标准化的查询;数仓用于处理复杂的分析查询。

> 4.数据范围:OLTP系统通常只保存当前的数据;数仓会保存历史的数据。

> 5.性能优化:OLTP系统优化的是写入性能;数仓优化的是读取和分析性能。

> 还有一点,数仓通常会保存多个源系统的数据。

> 举个例子总结下:

> 如果说传统数据库像是一个高效运转的工厂,那么数据仓库就像是一个大型的研究中心,存储、整理并分析大量的信息,为企业决策提供支持。

数据仓库的概念

数据仓库是一个为支持商业智能和决策分析而设计的大型数据存储和管理系统。

数据仓库和传统数据库的区别

|------|------------|-----------------|
| | OLTP | OLAP |
| 用途 | 联机事务处理 | 联机分析处理 |
| 数据更新 | 频繁更新 | 相对稳定,定期加载 |
| 数据模型 | 高度规范化 | 星型或者雪花模型,优化查询性能 |
| 查询类型 | 处理简单标准化的查询 | 处理复杂的分析查询 |
| 数据范围 | 只保存当前数据 | 保存大量的历史数据 |
| 性能优化 | 优化写入性能 | 优化读取和分析性能 |
| 数据整合 | 单一 | 整合来自多个源系统的数据 |

相关推荐
掘金-我是哪吒2 小时前
分布式微服务系统架构第156集:JavaPlus技术文档平台日更-Java线程池使用指南
java·分布式·微服务·云原生·架构
亲爱的非洲野猪2 小时前
Kafka消息积压的多维度解决方案:超越简单扩容的完整策略
java·分布式·中间件·kafka
活跃家族2 小时前
分布式压测
分布式
涤生大数据2 小时前
Apache Spark 4.0:将大数据分析提升到新的水平
数据分析·spark·apache·数据开发
搞笑的秀儿2 小时前
信息新技术
大数据·人工智能·物联网·云计算·区块链
SelectDB3 小时前
SelectDB 在 AWS Graviton ARM 架构下相比 x86 实现 36% 性价比提升
大数据·架构·aws
二二孚日3 小时前
自用华为ICT云赛道Big Data第五章知识点-Flume海量日志聚合
大数据·华为
前端世界4 小时前
HarmonyOS开发实战:鸿蒙分布式生态构建与多设备协同发布全流程详解
分布式·华为·harmonyos
DavidSoCool4 小时前
RabbitMQ使用topic Exchange实现微服务分组订阅
分布式·微服务·rabbitmq
二二孚日5 小时前
自用华为ICT云赛道Big Data第四章知识点-Flink流批一体分布式实时处理引擎
大数据·华为