StarRocks 实战系列:明细模型的高效数据分析

什么是 StarRocks?

StarRocks 是新一代极速全场景 MPP (Massively Parallel Processing) 数据库 。StarRocks 的愿景是能够让用户的数据分析变得更加简单和敏捷。用户无需经过复杂的预处理,就可以用 StarRocks 来支持多种数据分析场景的极速分析。

为了满足业务上的分析需求 StarRocks 设计了四种数据模型(明细模型、聚合模型、更新模型、主键模型),它们有各自的特点以适配不同的业务场景。

本文将从创建数据模型表开始,配合简洁的案例,来讲解明细模型的用法和特点。

明细模型的核心理念

明细模型在 StarRocks 中扮演着重要的角色。其核心理念在于通过排序键提高查询效率,特别适用于数据分析等场景。

排序键的妙用

明细模型允许用户在创建表时定义排序键。这个排序键的作用类似于 MySQL 中的普通索引,通过合理设置排序键,可以使 StarRocks 更高效地过滤和查询数据。这种灵活性使得明细模型成为处理大规模数据时的得力助手。

适用场景的拓展

除了日志数据分析,对于实时交易数据或事件记录的分析,明细模型同样展现出强大的性能。通过选择合适的排序键,用户可以优化数据库的查询速度,提高数据分析的效率。

明细模型与 MySQL 的异同

可以看到除了 StarRocks 特有的关键字之外,两者语法大致是相同的,但有什么样的特点呢?

  • 如果在建表语句中不指定具体模型,默认就是 DUPLICATE KEY 明细模型,并且会自动选取前三列作为排序键
  • 指定排序键的作用类似于 MySQL 给列设置普通索引,目的是为了提高查询效率
  • 写入的数据无论是否完全一致,都会插入到数据库中而且不支持 Update 语法

我们从对比的角度讲,明细模型大致相当于:

MySQL 具有普通索引的无主键表,并且不支持 Update 操作

怎么建表?

在实际操作中,使用 CloudDM 的可视化工具,我们可以轻松创建 StarRocks 的明细模型表。以下是详细的步骤:

  1. 使用 CloudDM,添加完 StarRocks 数据源之后,在表视图中右键方式开始新建表操作:
  1. 配置基本信息,包括表名等
  1. 添加列信息,在结构设计器中选择列,然后点击增加按钮新建一个列,在右侧可以配置列的信息
  1. 设置表的数据模型,点击数据模型,点击添加类型选择 "明细模型",接着在下方选择排序键
  1. 配置排序键,在右方具体选择列,多个排序键列需要多次点击增加。
  1. 点击保存,生成建表语句,可选择立即执行或者复制 SQL 语句

怎么写数据?

  1. 右键点击新建表,并选择 编辑数据
  1. 准备三行数据,前两行数据完全相同,点击 "+" 符号,填写完成后点击提交,保存这三条数据
  1. 查看插入的数据,发现三条都已写入,验证明细模型的特点: 写入的数据无论是否完全一致,都会插入到数据库中。如果选择的是 StarRocks 聚合模型,上面三条数据插入之后就会变为 2 条
  1. 验证是否支持 Update,双击 "SR_TEST" 库打开新的查询窗口,针对这个表尝试做一次 UPDATE 操作,结果执行报错:
  1. CloudDM 可视化数据编辑会直接禁用更改,和 StarRocks 数据库约束保持一致

技术分享与总结

通过深入探讨 StarRocks 的明细模型,我们更全面地了解了这一高效数据库的设计思想和应用场景。从排序键的妙用到与 MySQL 的比较,我们希望读者通过本文能够更好地理解和应用 StarRocks 的明细模型。

CloudDM 作为可视化工具,进一步简化了表的创建和数据操作步骤,为用户提供了更便捷的数据分析体验。相信通过这篇文章,可以帮助读者对 StarRocks 的明细模型有了更深入的认识。

相关推荐
JaguarJack32 分钟前
PHP 8.6 只是个小版本,三十项弃用却已在为 PHP 9.0 铺路
后端·php·服务端
BingoGo33 分钟前
PHP 8.6 只是个小版本,三十项弃用却已在为 PHP 9.0 铺路
后端·php
Bs_MoneyMagnet4 小时前
基于springboot+vue的滑雪场票务与装备租赁系统的设计与实现 源码+文档
java·vue.js·spring boot·后端·spring·毕业设计·计算机毕业设计
AlienZHOU8 小时前
AI Coding 时代下,我的技术面试实践分享
前端·后端·面试
外域速览8 小时前
智谱50亿美元押注AI自训练
大数据·人工智能
人工智能培训8 小时前
孪生不止在工厂:能源、医疗与农业
大数据·人工智能
QYRdata9 小时前
隐私合规技术迎来拐点:数据主体请求自动化年复合增长率14.0%(2026-2032)
大数据·服务发现
狗头大军之江苏分军10 小时前
《潮水漫过十七岁》开学了
后端
苏三说技术11 小时前
如何看待GPT-6在UP主众测中碾压夺冠?它是现在最强大模型吗?
后端
mldong11 小时前
一份 JSON,一条能跑的审批流:把报销流程送上工作流引擎
后端·架构