主流OLAP对比

参考

主流大数据OLAP框架对比

分类

按照架构实现划分:

  • MPP 架构系统:Presto、Impala、Doris、Clickhouse、Spark SQL、Flink SQL...,这种架构主要还是从查询引擎入手,使用分布式查询引擎。
  • 搜索引擎架构的系统:es。
  • 预计算系统:Druid、Kylin...,则在入库时对数据进行预聚合,进一步牺牲灵活性换取性能,以实现对超大数据集的秒级响应。

对比


Druid支持hadoop和s3等存储。

Kylin依赖hadoop:hive,hbase,kafka等。

Druid 和 Kylin,一般会根据用户定义的数据维度、度量(也可以叫指标)在数据写入时生成预聚合数据;Query查询到来时,实际上查询的是预聚合的数据而不是原始明细数据,在查询模式相对固定的场景中,这种优化提速很明显。

相关推荐
StarRocks_labs14 天前
AutoMQ x StarRocks: 英国美容健康领导者 Fresha 如何构建现代化实时分析数据栈
starrocks·olap·automq·fresha·kafk
想ai抽1 个月前
StarRocks 存储引擎设计深度调研笔记
大数据·starrocks·olap
想ai抽1 个月前
StarRocks 数据模型深度调研笔记
大数据·olap·starrock
ClouGence2 个月前
从 OLTP 到 OLAP:Spanner 到 StarRocks 架构演进与实现
大数据·数据库·starrocks·olap·dba·oltp·spanner
镜舟科技3 个月前
华农保险 x StarRocks:从单机瓶颈到架构焕新,探索 OLAP 的涅槃之路
starrocks·数据分析·olap·物化视图·金融行业·华农保险
Paraverse_徐志斌4 个月前
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践
大数据·clickhouse·flink·kafka·olap·etl
StarRocks_labs5 个月前
双 11 大促峰值不翻车:淘天集团 Paimon + StarRocks 大规模 OLAP 查询实战与优化
数据库·starrocks·olap·淘宝·paimon
梦想画家6 个月前
破局OLAP困境:PostgreSQL集成列存储数据的终极方案——DuckDB FDW深度实践
postgresql·olap·duckdb
阿坤带你走近大数据6 个月前
StarRocks(SR)的基本概念、架构及基本使用介绍
starrocks·架构·olap