doris

涤生大数据7 小时前
大数据·spark·doris·实时计算·大数据开发·实时分析·实时技术
日均亿级数据的实时分析:Doris如何接过Spark的接力棒?过去十年,若要在大数据技术圈评选 “现象级顶流”,Apache Spark 必然是绕不开的存在。它曾以 “颠覆者” 姿态打破 Hadoop MapReduce 的桎梏,成为企业搭建数据体系的 “标配引擎”—— 从 TB 级离线数仓的批处理,到日均亿级数据的 ETL 清洗,再到早期机器学习模型的训练,Spark 几乎承包了大数据领域的半壁江山。 然而,随着数据需求的演进,企业从 “离线批量” 逐渐迈向 “实时交互” 与 “一体化分析”,新的技术浪潮正在兴起。以 Apache Doris 为代表的新一代引擎(
FeelTouch Labs8 天前
doris
Apache Doris 与 湖仓一体Apache Doris 是一款基于 MPP 架构的高性能、实时的分析型数据库,以高效、简单、统一的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,Apache Doris 能够较好的满足报表分析、即席查询、统一数仓构建、湖仓一体等使用场景,用户可以在此之上构建大屏看板、用户行为分析、AB 实验平台、日志检索分析、用户画像分析、订单分析等应用。
孟意昶22 天前
大数据·数据库·分布式·sql·doris
Doris专题17- 数据导入-文件格式Apache Doris 支持多种文件格式的数据导入,每种格式都有其特定的使用场景和配置参数。本笔记详细记录了 ORC、Parquet、JSON 和 CSV 格式的导入方法和最佳实践。
boonya1 个月前
apache·doris
Apache Doris 入门与技术替代方案Apache Doris 是一个基于 MPP 的实时数据仓库,以其极快的查询速度而闻名。对于大型数据集的查询,它可以在亚秒级返回结果。它既支持高并发的点查询,也支持高吞吐量的复杂分析。它可用于报表分析、即席查询、统一数据仓库和数据湖查询加速。基于 Apache Doris,用户可以构建用于用户行为分析、A/B 测试平台、日志分析、用户画像分析和电商订单分析的应用程序。
涤生大数据1 个月前
性能优化·apache·doris·大数据技术
Apache Doris性能优化全解析:慢查询定位与引擎深度调优在海量数据与复杂查询场景下,Apache Doris 的性能有时候并不能达到预期,这时候就需要通过系统性调优匹配业务需求。本文将梳理从问题定位到引擎优化的全流程方法,帮助开发者精准挖掘系统性能潜能。
BullSmall1 个月前
数据库·doris
Doris数据库-初识您想详细了解 Doris 数据库。下面的内容将全面介绍 Apache Doris,包括它是什么、为什么如此受欢迎、它的核心特性、架构以及典型使用场景。
cg.family2 个月前
doris
基于 Apache Doris 的用户画像数据模型设计方案数据源:用户基本信息:用户ID、性别、出生日期、注册时间、常驻地域(省、市、区)、职业等。用户体检报告:每次体检的报告ID、体检时间、各项指标(如血压、血糖、血脂、BMI等)。
cg.family2 个月前
kafka·doris
Doris 消费kafka消息Doris 通过 Routine Load 功能来消费 Kafka 消息,这是一种自动化的、持续的数据导入方式。
cg.family2 个月前
数据仓库·doris
Doris 数据仓库例子基于 Apache Doris 构建数据仓库的方案和具体例子。Doris 以其高性能、易用性和实时能力,成为构建现代化数据仓库(特别是 OLAP 场景)的优秀选择。
cg.family2 个月前
doris·routine load
Doirs Routine Load本文来深入、详细地介绍一下 Apache Doris 的 Routine Load 功能。这是 Doris 中实现持续、自动化数据导入的核心特性,尤其适用于从 Kafka 等消息系统中实时摄取数据。
SelectDB技术团队3 个月前
开源·apache·数据库开发·doris·实时分析
ApacheCon Asia 2025 中国开源年度报告:Apache Doris 国内第一上周刚落下帷幕的 ApacheCon Asia 2025 中,一个数据让所有人都为之震撼:全球 Apache 基金会项目 OpenRank 排行榜中,Apache Doris 位居第二,在中国 Apache 项目中更是稳居第一。
纯洁的小魔鬼3 个月前
spring boot·doris·连接池
Springboot 配置 doris 连接因为 Doris 的前端(FE)兼容了 MySQL 协议,可以像连 MySQL 一样连 Doris。这是 Doris 的一个核心设计特性,目的是方便接入、简化生态兼容。
SelectDB技术团队4 个月前
elasticsearch·阿里云·doris
森马服饰从 Elasticsearch 到阿里云 SelectDB 的架构演进之路森马引入阿里云 SelectDB 替换原 Elasticsearch + 业务库混合架构,统一分析 16+ 核心业务,打通 BI 组件,大幅简化数据同步链路和分析系统架构。实现复杂查询 QPS 提升 400%,响应时间缩短至秒级,亿级库存流水聚合查询缩短至 8 秒内的显著收益,有效驱动森马全渠道运营效率持续增长与业务创新。
天翼云开发者社区4 个月前
大数据·doris
Doris-HDFS LOAD常见问题汇总(二)本文分享自天翼云开发者社区《Doris-HDFS LOAD常见问题汇总(二)》,作者:刘****阳show load where label="" from db;
Faith_xzc5 个月前
大数据·数据仓库·apache·doris
Apache Doris FE 问题排查与故障分析全景指南前言: FE(Frontend)是 Apache Doris 集群架构中的“大脑”,负责元数据管理、查询解析和调度等关键任务。一旦 FE 出现问题,整个集群的稳定性和可用性将受到严重影响。因此,掌握 FE 故障定位与排查方法对于保障 Doris 运行至关重要。本文将结合官方文档与实际经验,系统梳理 FE 问题排查的完整路径。
寂夜了无痕5 个月前
doris·doris manager·doris studio
doris manager 安装部署 、管理已有doris集群、使用studio进行SQL查询由于doris 自带的fe 控制台不是很好用,在社区了解到可以通过 doris manager来管理已有集群 同时 可以使用studio 控制查询SQL 特此记录
江畔独步5 个月前
数据仓库·mysql·doris·upsert
Doris与DS结合实现MySQL侧的Upsert功能可以借助 DolphinScheduler 调度工具,实现从 Doris 查询联合主键记录并传递到 MySQL 执行删除操作,需要结合 SQL 任务、Shell 任务和 参数传递 功能。
涤生大数据5 个月前
数据仓库·apache·doris
Apache Doris 在数据仓库中的作用与应用实践在当今数字化时代,企业数据呈爆炸式增长,数据仓库作为企业数据管理和分析的核心基础设施,其重要性不言而喻。而 Apache Doris,作为一款基于 MPP(Massively Parallel Processing,大规模并行处理)架构的高性能实时分析型数据库,在数据仓库领域正发挥着举足轻重的作用。
IT成长日记5 个月前
apache·doris·replica
【Doris基础】Doris中的Replica详解:Replica原理、架构目录1 Replica基础概念1.1 什么是Replica1.2 Doris中的副本类型2 Doris副本架构设计
IT成长日记5 个月前
apache·doris·coordinator
【Doris基础】Apache Doris中的Coordinator节点作用详解目录1 Doris架构概述2 Coordinator节点的核心作用2.1 查询协调与调度2.2 执行计划生成与优化