starrocks

鸿乃江边鸟2 天前
java·大数据·starrocks·sql
Starrocks 物化视图的实现以及在刷新期间能否读数据本司在用Starrocks做一些业务上的分析的时候,用到了物化视图,并且在高QPS的情况下,RT也没有很大的波动,所以在此研究一下Starrock的实现,以及在刷新的时候是不是原子性的 本文基于Starrocks 3.3.5
StarRocks_labs3 天前
大数据·starrocks·云原生·iceberg·物化视图
StarRocks x Iceberg:云原生湖仓分析技术揭秘与最佳实践导读:本文将深入探讨基于 StarRocks 和 Iceberg 构建的云原生湖仓分析技术,详细解析两者结合如何实现高效的查询性能优化。内容涵盖 StarRocks Lakehouse 架构、与 Iceberg 的性能协同、最佳实践应用以及未来的发展规划,为您提供全面的技术解读。
鸿乃江边鸟3 天前
大数据·starrocks·sql
Starrocks 怎么计算各个算子的统计信息写这个文章的原因是为了了解一下Starrocks对各个算子的代价是怎么计算的,以便在后续对Starrocks做优化的时候,能够起到辅助作用 本文基于 Starrocks 3.3.5
鸿乃江边鸟9 天前
大数据·starrocks·sql
Starrocks的CBO基石--统计信息的来源 StatisticAutoCollector本文来从底层代码的实现来分析一下Starrocks怎么获取统计信息,这些统计信息在后续基于CBO的代价计算的时候有着重要的作用 本文基于Starrrocks 3.3.5
StarRocks_labs10 天前
数据库·starrocks·数据查询·routine load·stream load
StarRocks Community Monthly Newsletter (Apr)核心功能升级Routine Load和Stream Load新增Lambda表达式支持,支持复杂的列数据提取
StarRocks_labs15 天前
数据库·starrocks·人工智能·开源·olap·mcp
StarRocks MCP Server 开源发布:为 AI 应用提供强大分析中枢过去,开发者要让大模型(LLM)使用数据库查询数据,往往需要开发专属插件、设计复杂的接口或手动构建 Prompt,这不仅费时费力,而且很难在不同模型之间复用。StarRocks MCP Server 提供了一个“通用适配器”接口,让各种 LLM(如 Claude、OpenAI、Gemini)都能标准化地访问 StarRocks,使得模型能够直接执行 SQL 查询并探索数据库内容,无需复杂的配置或集成。
鸿乃江边鸟15 天前
大数据·starrocks·sql
Starrocks的主键表涉及到的MOR Delete+Insert更新策略写这个文章的作用主要是做一些总结和梳理,特别是正对大数据场景下的实时写入更新策略 COW 和 MOR 以及 Delete+Insert 的技术策略的演进, 这也适用于其他大数据的计算存储系统。该文章主要参考了Primary Key table.
StarRocks_labs17 天前
大数据·数据库·starrocks·分布式·spark·iris·物化视图
从InfluxDB到StarRocks:Grab实现Spark监控平台10倍性能提升Grab 是东南亚领先的超级应用,业务涵盖外卖配送、出行服务和数字金融,覆盖东南亚八个国家的 800 多个城市,每天为数百万用户提供一站式服务,包括点餐、购物、寄送包裹、打车、在线支付等。
roman_日积跬步-终至千里18 天前
starrocks·网络协议·http
【starrocks】StarRocks 常见 HTTP 操作与导入错误排查指南StarRocks 是一款面向分析型场景的高性能 MPP 数据库,提供了丰富的 HTTP 接口,广泛用于数据导入、系统状态查询和任务管理。本文将系统梳理 StarRocks 常用的 HTTP 操作命令,并介绍如何排查数据导入过程中的常见错误。
镜舟科技18 天前
starrocks·金融·架构·数据分析·湖仓一体·物化视图·lakehouse
湖仓一体架构在金融典型数据分析场景中的实践在数字经济与金融科技深度融合的今天,数据已成为金融机构的核心战略资产。然而,传统数据架构面临着三大困局,制约着金融机构数据价值的充分释放。
鸿乃江边鸟22 天前
大数据·starrocks·sql
Starrocks 的 ShortCircuit短路径本文基于 Starrocks 3.3.5 本文主要来探索一下Starrocks在FE端怎么实现 短路径,从而加速点查查询速度。 在用户层级需要设置 enable_short_circuit 为true
镜舟科技1 个月前
大数据·starrocks·数据分析·湖仓一体·物化视图·lakehouse·存算分离
StarRocks Lakehouse 如何重构大数据架构?随着数据分析需求的不断演进,企业对数据处理架构的期望也在不断提升。在这一背景下,StarRocks 凭借其高性能的实时分析能力,正引领数据分析进入湖仓一体的新时代。
镜舟科技1 个月前
starrocks·数据仓库·数据湖·大数据平台·湖仓一体·物化视图·流式湖仓
大数据平台与数据仓库的核心差异是什么?随着数据量呈指数级增长,企业面临着如何有效管理、存储和分析这些数据的挑战。 大数据平台和 数据仓库作为两种主流的数据管理工具,常常让企业在选型时感到困惑,它们之间的界限似乎越来越模糊,功能也有所重叠。本文旨在厘清这两种技术的核心差异,并为企业提供一个实用的选型参考框架。
StarRocks_labs1 个月前
数据库·starrocks·olap·数据查询·查询优化·logical rewrite
StarRocks 查询优化器深度解析1. Development History of StarRocks过去五年,StarRocks 发布了三个大版本:
StarRocks_labs1 个月前
数据库·starrocks·数据分析·spark·olap·湖仓一体·deepseek
RAG 实战|用 StarRocks + DeepSeek 构建智能问答与企业知识库文章作者:石强,镜舟科技解决方案架构师赵恒,StarRocks TSC Member👉 加入 StarRocks x AI 技术讨论社区 https://mp.weixin.qq.com/s/61WKxjHiB-pIwdItbRPnPA
鸿乃江边鸟1 个月前
大数据·starrocks·sql
Starrocks 数据均衡DiskAndTabletLoadReBalancer的实现最近在研究了一下 Starrocks的tablet的Rebalance的能力,这里进行记录一下 本文基于 StarRocks 3.3.5
不剪发的Tony老师1 个月前
starrocks·数据仓库
StarRocks:一款开源的高性能分析型数据仓库StarRocks 是一款高性能分析型数据仓库,使用向量化、MPP 架构、CBO(基于成本优化)、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。
StarRocks_labs1 个月前
starrocks·数据仓库·数据分析·olap·湖仓一体
StarRocks Community Monthly Newsletter (Mar)核心功能升级数据安全与权限管控支持「安全视图」功能,严格管控视图查询权限MySQL协议连接支持SSL认证,保障数据传输安全
镜舟科技1 个月前
数据库·starrocks·nosql·newsql·技术架构·实时数据分析
NoSQL 与 NewSQL 全面对比:如何选择适合你的数据库方案?随着互联网业务的爆发式增长,传统关系型数据库(RDBMS)面临着越来越大的挑战。海量数据存储、高并发访问、低延迟响应等需求促使技术团队寻找更适合的解决方案。在这一背景下,NoSQL 和 NewSQL 作为两种不同方向的技术路线应运而生。
镜舟科技2 个月前
大数据·starrocks·数据分析·开源·lakehouse·分析型数据库·湖仓
镜舟科技助力某大型电网企业破解数据架构升级难题,打造国产化湖仓标杆在 “十四五” 规划全面推进国产化替代的背景下,某大型电网企业联合镜舟科技与腾讯云,基于全球领先的开源分析型数据库 StarRocks 及腾讯 TBDS 大数据平台,构建电力行业国产化湖仓一体架构。该项目实现 PB 级电力数据的统一管理,为能源行业核心系统国产化升级提供了可复制的技术范本。