StarRocks 怎么让特定的SQL路由到FE master节点的

背景

本文基于 StarRocks 3.1.7

大家都知道对于Starrocks来说 FE 是分 master和follower的,而只有master节点才能对元数据进行写操作。但是为什么呢?哪里有体现呢?

这其中的原因在网上是搜不到的,所以大家只知道只有master节点才能对元数据进行写操作,而哪里有体现呢

结论

复制代码
每个SQL被 语法解析器 解析完后,都会带有getRedirectStatus方法,这个方法用来表明该SQL是否重定向到master节点执行,所以真实环境中,你会看到FE Master的节点的CPU会比较高

分析

我们直接定位到StmtExecutor.execute()方法:

复制代码
private RedirectStatus redirectStatus = null;

 public void execute() throws Exception {
            ...
            try (Timer ignored = Tracers.watchScope("Total")) {
                redirectStatus = parsedStmt.getRedirectStatus();

这里的parsedStmt.getRedirectStatus()方法就是用来表明该SQL是否会重定向到 FE master节点,比如说DML和DDL语句:

复制代码
public abstract class DmlStmt extends StatementBase {
    public static final long INVALID_TXN_ID = -1L;

    private long txnId = INVALID_TXN_ID;

    protected DmlStmt(NodePosition pos) {
        super(pos);
    }

    @Override
    public RedirectStatus getRedirectStatus() {
        return RedirectStatus.FORWARD_WITH_SYNC;
    }

    public abstract TableName getTableName();

    public long getTxnId() {
        return txnId;
    }

    public void setTxnId(long txnId) {
        this.txnId = txnId;
    }
}

public abstract class DdlStmt extends StatementBase {
    protected DdlStmt(NodePosition pos) {
        super(pos);
    }

    @Override
    public RedirectStatus getRedirectStatus() {
        return RedirectStatus.FORWARD_WITH_SYNC;
    }

    @Override
    public <R, C> R accept(AstVisitor<R, C> visitor, C context) {
        return visitor.visitDDLStatement(this, context);
    }

}

这些都是RedirectStatus.FORWARD_WITH_SYN,也就是会重定向到FE master节点。比如说一下语句都会重定向到master执行:

复制代码
truncate table ..
alter table ...
create table ...
drop table ...

而后在后面的执行中会有如下判断:

复制代码
 if (isForwardToLeader()) {
     context.setIsForward(true);
     forwardToLeader();
     return;
 } else {
     LOG.debug("no need to transfer to Leader. stmt: {}", context.getStmtId());
 }

这里的方法 isForwardToLeader调用链如下:

复制代码
isForwardToLeader
  ||
  \/
getIsForwardToLeaderOrInit
  ||
  \/
initForwardToLeaderState
  ||
  \/
redirectStatus.isForwardToLeader()

这里就会用到getRedirectStatus方法返回的 redirectStatus.

相关推荐
wangqiaowq11 分钟前
StarRocks 3.5.7 安装部署
大数据
PPT百科20 分钟前
PPT插入的音乐怎么让它播放到某一页就停?
大数据·职场和发展·powerpoint·职场·ppt模板
码上地球33 分钟前
大数据成矿预测系列(八) | 从定性到概率:逻辑回归——地质统计学派的“集大成者”
大数据·逻辑回归
拓端研究室34 分钟前
专题:2025中国医疗器械出海现状与趋势创新发展研究报告|附160+份报告PDF、数据、可视化模板汇总下载
大数据·人工智能·pdf
zskj_zhyl1 小时前
科技向暖,银发无忧:十五五规划中智慧养老的温度革命
大数据·人工智能·科技·物联网·生活
muxue1782 小时前
Hadoop集群搭建(上):centos 7为例(已将将安装所需压缩包统一放在了/opt/software目录下)
大数据·hadoop·centos
q***23922 小时前
【SQL技术】不同数据库引擎 SQL 优化方案剖析
数据库·sql
阿里云大数据AI技术2 小时前
【跨国数仓迁移最佳实践11】基于 MaxCompute Resource & Quota策略优化实现资源管理性能与成本最优平衡
大数据
Elastic 中国社区官方博客3 小时前
Elasticsearch 的结构化文档配置 - 递归分块实践
大数据·人工智能·elasticsearch·搜索引擎·ai·全文检索·jenkins
草明3 小时前
Elasticsearch 报错:index read-only / allow delete (api) 深度解析与解决方案
大数据·elasticsearch·jenkins