湖仓平台

数美科技的数百TB大数据平台实践：从“1天响应“到“定义即可查”大数据平台面临一个根本性矛盾：用于分析的数据字段可（灵活）调整与数据的加工和分析（性能）的矛盾。Spark查询JSON灵活但慢（数十分钟），ClickHouse查询宽表快（秒级）但Schema固化。每次业务需要新的查询维度，都需要平台团队开发ETL、打平JSON、写入ClickHouse，耗时至少1天。

NinjaVan x 云器Lakehouse: 从传统自建Spark架构升级到新一代湖仓架构通过本篇文章，你可以了解到从传统自建Spark架构升级到新一代湖仓架构的显著业务价值和轻便的实现过程:

我是有底线的