数据仓库的概念

先用大白话讲一下,数据仓库的主要目的就是存储和分析大量结构化数据的。

> 那么它的核心目的是:支持商业智能(BI)和决策支持系统,也就是说,它不仅仅是为了存储,更重要的是为了分析提供便利。

> 再来说下它的特点:面向主题的、集成的、相对稳定的、随时间变化的。而这些特点恰恰反应了数据仓库与传统数据库的区别。

> 这里就要先讲一下OLTP(联机事务处理)OLAP(联机分析处理)的区别

> 1.数据更新:OLTP系统的数据经常被更新,数据仓库的数据相对稳定,通常只定期加载。

> 2.数据模型:OLTP系统通常使用高度规范化的模型;数据仓库通常使用星型或雪花模型

> 3.查询类型:OLTP系统主要处理简单、标准化的查询;数仓用于处理复杂的分析查询。

> 4.数据范围:OLTP系统通常只保存当前的数据;数仓会保存历史的数据。

> 5.性能优化:OLTP系统优化的是写入性能;数仓优化的是读取和分析性能。

> 还有一点,数仓通常会保存多个源系统的数据。

> 举个例子总结下:

> 如果说传统数据库像是一个高效运转的工厂,那么数据仓库就像是一个大型的研究中心,存储、整理并分析大量的信息,为企业决策提供支持。

数据仓库的概念

数据仓库是一个为支持商业智能和决策分析而设计的大型数据存储和管理系统。

数据仓库和传统数据库的区别

|------|------------|-----------------|
| | OLTP | OLAP |
| 用途 | 联机事务处理 | 联机分析处理 |
| 数据更新 | 频繁更新 | 相对稳定,定期加载 |
| 数据模型 | 高度规范化 | 星型或者雪花模型,优化查询性能 |
| 查询类型 | 处理简单标准化的查询 | 处理复杂的分析查询 |
| 数据范围 | 只保存当前数据 | 保存大量的历史数据 |
| 性能优化 | 优化写入性能 | 优化读取和分析性能 |
| 数据整合 | 单一 | 整合来自多个源系统的数据 |

相关推荐
数据慢想25 分钟前
从2小时到3分钟:Spark SQL多维分析性能优化实战
spark
Lx35235 分钟前
Hadoop日志分析实战:快速定位问题的技巧
大数据·hadoop
喂完待续3 小时前
【Tech Arch】Hive技术解析:大数据仓库的SQL桥梁
大数据·数据仓库·hive·hadoop·sql·apache
SelectDB4 小时前
5000+ 中大型企业首选的 Doris,在稳定性的提升上究竟花了多大的功夫?
大数据·数据库·apache
写bug写bug4 小时前
分布式锁的使用场景和常见实现(下)
分布式·后端·面试
最初的↘那颗心4 小时前
Flink Stream API 源码走读 - window 和 sum
大数据·hadoop·flink·源码·实时计算·窗口函数
Yusei_05236 小时前
迅速掌握Git通用指令
大数据·git·elasticsearch
一只栖枝12 小时前
华为 HCIE 大数据认证中 Linux 命令行的运用及价值
大数据·linux·运维·华为·华为认证·hcie·it
喂完待续17 小时前
Apache Hudi:数据湖的实时革命
大数据·数据仓库·分布式·架构·apache·数据库架构
青云交17 小时前
Java 大视界 -- 基于 Java 的大数据可视化在城市交通拥堵治理与出行效率提升中的应用(398)
java·大数据·flink·大数据可视化·拥堵预测·城市交通治理·实时热力图