主流OLAP对比

参考

主流大数据OLAP框架对比

分类

按照架构实现划分:

  • MPP 架构系统:Presto、Impala、Doris、Clickhouse、Spark SQL、Flink SQL...,这种架构主要还是从查询引擎入手,使用分布式查询引擎。
  • 搜索引擎架构的系统:es。
  • 预计算系统:Druid、Kylin...,则在入库时对数据进行预聚合,进一步牺牲灵活性换取性能,以实现对超大数据集的秒级响应。

对比


Druid支持hadoop和s3等存储。

Kylin依赖hadoop:hive,hbase,kafka等。

Druid 和 Kylin,一般会根据用户定义的数据维度、度量(也可以叫指标)在数据写入时生成预聚合数据;Query查询到来时,实际上查询的是预聚合的数据而不是原始明细数据,在查询模式相对固定的场景中,这种优化提速很明显。

相关推荐
镜舟科技19 天前
华农保险 x StarRocks:从单机瓶颈到架构焕新,探索 OLAP 的涅槃之路
starrocks·数据分析·olap·物化视图·金融行业·华农保险
Paraverse_徐志斌2 个月前
基于 Kafka + Flink + ClickHouse 电商用户行为实时数仓实践
大数据·clickhouse·flink·kafka·olap·etl
StarRocks_labs2 个月前
双 11 大促峰值不翻车:淘天集团 Paimon + StarRocks 大规模 OLAP 查询实战与优化
数据库·starrocks·olap·淘宝·paimon
梦想画家3 个月前
破局OLAP困境:PostgreSQL集成列存储数据的终极方案——DuckDB FDW深度实践
postgresql·olap·duckdb
阿坤带你走近大数据3 个月前
StarRocks(SR)的基本概念、架构及基本使用介绍
starrocks·架构·olap
KG大数据3 个月前
Apache Doris 在 IOT 场景的实践与落地方案
物联网·doris·olap
IT 行者4 个月前
ClickHouse 学习笔记:单例模式安装部署实战指南
数据库·olap
码以致用5 个月前
StarRocks笔记
数据库·starrocks·olap·1024程序员节
SelectDB技术团队6 个月前
Apache Doris 4.0 AI 能力揭秘(二):为企业级应用而生的 AI 函数设计与实践
数据库·人工智能·apache·olap·mcp