StarRocks jvm 及 异步物化视图 配置

1. JVM 配置

  1. FE
    修改start_fe.sh,将export JAVA_OPTS="-Xmx8g" 修改为 export JAVA_OPTS="-Xmx16g"
  2. BE
    修改start_backend.sh,增加一行 export JAVA_OPTS="-Xmx64g" 配置。注意,JAVA_OPTS需要配置在jvm_arch和LD_LIBRARY_PATH的赋值之前
  3. 重启FE和BE

2. 异步物化视图

StarRocks 自 2.4 版本起支持异步物化视图。

相较于同步物化视图,异步物化视图支持多表关联以及更加丰富的聚合算子。异步物化视图可以通过手动调用或定时任务的方式刷新,并且支持刷新部分分区,可以大幅降低刷新成本。除此之外,异步物化视图支持多种查询改写场景,实现自动、透明查询加速。

  1. 创建异步物化视图
sql 复制代码
-- 创建一个异步物化视图,保存最近1min的数据,每秒刷新一次
CREATE MATERIALIZED VIEW mv_log
DISTRIBUTED BY HASH(`sys_org_code`,`system_code`)
REFRESH ASYNC START('2024-01-25 10:54:00') EVERY (interval 1 SECOND)
AS SELECT *
FROM log_api
WHERE log_time >= NOW() - INTERVAL 1 MINUTE;
  1. 查看物化视图状态
sql 复制代码
SHOW MATERIALIZED VIEWS;
  1. 查看物化视图任务执行状态(task_name 需替换为实际的 task_name)
sql 复制代码
select * from information_schema.task_runs where task_name='mv-357305' order by CREATE_TIME DESC;
  1. 查询物化视图数据
sql 复制代码
SELECT count(1) FROM mv_log;
  1. 删除物化视图
sql 复制代码
DROP MATERIALIZED VIEW mv_log;
相关推荐
倔强的石头_几秒前
数据迁移工具KDMS如何生成量化评估报告
数据库
冰暮流星5 分钟前
mysql多表练习2
数据库·sql·mysql
天天喝旺仔11 分钟前
Git 内部原理深度解析:从 blob/tree/commit 对象到 packfile 与垃圾回收
数据结构·数据库·git·算法·哈希
艾莉丝努力练剑16 分钟前
【Git:综合复盘】Git 原理与使用
大数据·人工智能·git·elasticsearch·面试
IT研究室22 分钟前
最新大数据毕业设计选题推荐-基于大数据的全球地震活动时空分布分析与可视化-大数据-Spark-Hadoop-Bigdata
大数据·信息可视化·数据分析·spark·课程设计
计算机源码社29 分钟前
基于Hadoop+Spark的商家优惠券营销效果数据分析与可视化-基于Python的商家优惠券营销效果检测与评估分析系统
大数据·hadoop·python·数据挖掘·spark·毕业设计·数据可视化
AcaDesign34 分钟前
上海市科技奖申报答辩ppt制作案例_科技进步奖ppt模板_技术发明奖ppt设计_自然科学奖ppt美化
大数据·科技·powerpoint
风哥2号3 小时前
数据库教程FGMT52‑PostgreSQL用户权限与安全管理
数据库·postgresql
Raas1007 小时前
MAI Gateway(魔芋企业级AI网关)技术揭秘:AI网关支持哪些模型?从原理到落地
大数据·人工智能·网关·gateway·mai gateway·企业级产品
风哥2号9 小时前
数据库教程FGMT27‑MySQL数据库基础知识与体系架构
数据库·mysql