starrocks

鸿乃江边鸟4 天前
大数据·starrocks·sql
StarRocks 怎么让特定的SQL路由到FE master节点的本文基于 StarRocks 3.1.7 大家都知道对于Starrocks来说 FE 是分 master和follower的,而只有master节点才能对元数据进行写操作。但是为什么呢?哪里有体现呢? 这其中的原因在网上是搜不到的,所以大家只知道只有master节点才能对元数据进行写操作,而哪里有体现呢
大鳥14 天前
数据库·starrocks·sql
深入了解 StarRocks 表类型:解锁高效数据分析的密码在当今数字化浪潮下,大数据分析成为企业决策、优化业务流程的关键利器。StarRocks 作为一款备受瞩目的高性能分析型数据库,其多样化的表类型为复杂的数据处理需求提供了精准解决方案。今天,就让我们一同深入探索 StarRocks 中的主键表、明细表、聚合表和更新表,从工作原理、读写流程、适用场景、标准建表语句等多个维度全面剖析,助您开启高效的大数据分析之旅。
京河小蚁1 个月前
starrocks
StarRocks 生产部署一套集群,存储空间如何规划?由于 FE 节点仅在其存储中维护 StarRocks 的元数据,因此在大多数场景下,每个 FE 节点只需要 100 GB 的 HDD 存储,生产建议200G SSD以上,FE-FOLLOWER节点也一样的配置。
一条路上的咸鱼1 个月前
starrocks
StarRocks元数据无法合并如果您的StarRocks版本在3.1.4及以下,并且使用了metadata_journal_skip_bad_journal_ids来跳过某个异常的journal,结果之后就出现了FE的元数据无法进行Checkpoint的现象,那么选择升级版本到3.1.4以上,就可以解决。
Shyllin1 个月前
starrocks
StarRocks 排查单副本表遍历所有库表执行SHOW PARTITIONS命令
小强签名设计1 个月前
数据库·starrocks·sql
SQL语句整理五-StarRocksinsert:update:参考:基于StarRocks的MySQL语句排雷秘籍报错信息为:1064 - StarRocks planner use long time 3000 ms in memo phase, This probably because 1. FE Full GC, 2. Hive external table fetch metadata took a long time, 3. The SQL is very complex. You could 1. adjust FE JVM
京河小蚁1 个月前
starrocks·broker
[bug] StarRocks borker load意向之外的bug意向之外,又清理之中StarRocks各方面碾压相同类型的数据库,最近我们要从生成HIVE导历史数据(ORC格式)到StarRocks,前期小测一下,在测试是没问题,上生产先导2个月的数据,大概10T,但是在测试过程中,发现了一个问题。
m0_375599731 个月前
starrocks
StarRocks:存算一体模式部署目录一、StarRocks 简介二、StarRocks 架构2.1 存算一体2.2 存算分离三、前期准备
一条路上的咸鱼2 个月前
starrocks·数据同步
离线数据同步变迁随着业务的发展,系统进行了微服务的差分,导致数据越来越分散,很难进行一个完整的生命周期的数据查询,对于某些业务的需求支持变得越来越难,越来越复杂,也越来越难以进行职责划分。对着业务的发展,数据量越来越大之后,为了良好的业务支持,进行了分库分表,分库分表规则五花八门,一旦脱离了业务逻辑,很难确定某一条数据在哪个库哪个表。
hankl19902 个月前
starrocks·数据仓库
StarRocks-同步hive数据官方文档对csv,orc ,json ,parquet都支持的比较好。写文章的时候SR我们生产用的是3.1.x版本
一条路上的咸鱼2 个月前
starrocks·数据同步
一种小资源情况下RDS数据实时同步StarRocks方案目前需要将阿里云RDS数据库的数据同步到自建的StarRocks集群。之前使用DolphinScheduler通过定时调度Datax任务,将数据同步到StarRocks集群中,但是随着业务的发展,这种方式出现了三个问题:
roman_日积跬步-终至千里2 个月前
starrocks
【StarRocks】starrocks 3.2.12 【share-nothing】 多Be集群容器化部署部署文档 https://docs.starrocks.io/zh/docs/2.5/deployment/plan_cluster/
crossoverJie2 个月前
starrocks·开源·pulsar
推荐一些值得学习的开源项目和框架今天收到球友的问题,让推荐一些值得看的开源项目,觉得 netty 这些太复杂了不太好上手。确实如此,我们日常常用的 Spring、Netty 确实由于发展了多年,看起来比较头大。
houzhizhen2 个月前
starrocks
StarRocks 架构StarRocks 是 MPP 的查询引擎,用来做实时查询,提供亚秒级的查询性能。 兼容 MYSQL 协议,可以和大部分 BI 工具进行无缝衔接。 Apache 2.0 开源产品。
crossoverJie2 个月前
数据库·starrocks
StarRocks 物化视图刷新流程及原理前段时间给 StarRocks 的物化视图新增了一个特性,那也是我第一次接触 StarRocks,因为完全不熟悉这个数据库,所以很多东西都是从头开始了解概念。
Double@加贝3 个月前
starrocks
Starrocks部署前期准备StarRocks 依靠 AVX2 指令集充分发挥其矢量化能力。因此,在生产环境中,强烈建议您将 StarRocks 部署于 x86 架构 CPU 的服务器上。
救救孩子把3 个月前
数据库·starrocks·mysql
Starrocks表的数据库字段类型及与MySQL 的差异最近有用到Starrocks,实际使用中基本可以当作mysql来使用,但是数据库字段还是有所不同的。与MySQL相同或相似的基础类型
鸿乃江边鸟3 个月前
大数据·starrocks
StarRocks 中如何做到查询超时(QueryTimeout)本文基于 StarRocks 3.1.7 主要是分析以下两种超时设置的方式:通过本文的分析大致可以了解到在Starrocks的FE端是如何进行Command的交互以及数据流走向,其他的命令也是可以举一反三
偏振万花筒4 个月前
大数据·数据库·starrocks·性能优化
【性能优化】低配starRocks常驻内存优化由于服务器的实际资源小于starRocks官方的配置,导致starRocks在无任务的情况下,常驻内存偏高,可用于查询的资源变小。