主流OLAP对比

参考

主流大数据OLAP框架对比

分类

按照架构实现划分:

  • MPP 架构系统:Presto、Impala、Doris、Clickhouse、Spark SQL、Flink SQL...,这种架构主要还是从查询引擎入手,使用分布式查询引擎。
  • 搜索引擎架构的系统:es。
  • 预计算系统:Druid、Kylin...,则在入库时对数据进行预聚合,进一步牺牲灵活性换取性能,以实现对超大数据集的秒级响应。

对比


Druid支持hadoop和s3等存储。

Kylin依赖hadoop:hive,hbase,kafka等。

Druid 和 Kylin,一般会根据用户定义的数据维度、度量(也可以叫指标)在数据写入时生成预聚合数据;Query查询到来时,实际上查询的是预聚合的数据而不是原始明细数据,在查询模式相对固定的场景中,这种优化提速很明显。

相关推荐
atbigapp.com3 个月前
全面介绍 Apache Doris 数据灾备恢复机制及使用示例
大数据·clickhouse·doris·olap·mpp
csdn5659738503 个月前
如何看待云原生数据库一体化的技术趋势?
数据库·云原生·olap·oltp
字节跳动数据平台3 个月前
聚焦OLAP性能提升,火山引擎ByteHouse发布六大场景解决方案
数据库·clickhouse·云原生·olap
乙真仙人3 个月前
【Apache Doris】周FAQ集锦:第 18 期
大数据·apache·doris·olap
乙真仙人4 个月前
【Apache Doris】数据副本问题排查指南
大数据·doris·olap·问题指南
乙真仙人4 个月前
【Apache Doris】周FAQ集锦:第 15 期
大数据·apache·doris·olap
乙真仙人4 个月前
【Apache Doris】周FAQ集锦:第 14 期
大数据·apache·doris·olap
贾斯汀玛尔斯4 个月前
doris使用总结-持续更新
数据仓库·doris·olap·湖仓一体
乙真仙人4 个月前
【Apache Doris】周FAQ集锦:第 9 期
大数据·apache·doris·olap