技术栈
实时数仓
SelectDB技术团队
8 天前
大数据
·
数据库
·
数据仓库
·
doris
·
实时数仓
Apache Doris 2.0.12 版本正式发布
亲爱的社区小伙伴们，Apache Doris 2.0.12 版本已于 2024 年 6 月 27 日正式与大家见面，该版本提交了 99 个改进项以及问题修复，欢迎大家下载体验。
DolphinDB智臾科技
3 个月前
数据库
·
数据仓库
·
物联网
·
时序数据库
·
实时数仓
案例与脚本实践：DolphinDB 轻量级实时数仓的构建与应用
DolphinDB 高性能分布式时序数据库，具有分布式计算、事务支持、多模存储、以及流批一体等能力，非常适合作为一款理想的轻量级大数据平台，轻松搭建一站式的高性能实时数据仓库。
华为云开发者联盟
3 个月前
实时数仓
·
华为云开发者联盟
·
华为云gaussdb(dws)
GaussDB(DWS)基于Flink的实时数仓构建
本文分享自华为云社区《GaussDB(DWS)基于Flink的实时数仓构建》，作者：胡辣汤。大数据时代，厂商对实时数据分析的诉求越来越强烈，数据分析时效从T+1时效趋向于T+0时效，为了给客户提供极速分析查询能力，华为云数仓GaussDB(DWS)基于流处理框架Flink实现了实时数仓构建。在本期《GaussDB(DWS)基于Flink的实时数仓构建》的主题直播中，华为云数仓GaussDB(DWS)解决方案专家Eric老师，为您深度解析GaussDB(DWS)+Flink如何增强湖仓增量数据在不同数据模型
GawynKing
3 个月前
数据仓库
·
架构
·
实时数仓
·
数据中台
实时数仓之实时数仓架构(Hudi)
目前比较流行的实时数仓架构有两类，其中一类是以Flink+Doris为核心的实时数仓架构方案；另一类是以湖仓一体架构为核心的实时数仓架构方案。本文针对Flink+Hudi湖仓一体架构进行介绍，这套架构的特点是可以基于一套数据完全实现Lambda架构。实时数仓架构图如下：
SelectDB技术团队
4 个月前
apache
·
实时数仓
一文让您读懂实时数仓（Apache Doris）
引言：随着大数据时代的来临，实时数据处理与分析成为企业核心竞争力的关键因素之一。在这场数据革命中，SelectDB成为引领者。从百度自研的实时数仓平台 Palo，到开源项目 Apache Doris，再到飞轮科技研发的 SelectDB，这些名字都代表着大数据处理领域的前沿技术和最佳实践，接下来带您深入了解实时数仓及其发展现状。
Light Gao
4 个月前
android
·
大数据
·
flink
·
实时数仓
·
flinkcdc
Flink实时数仓同步：实时表、流水表、快照表整合实战详解
在大数据领域，数据分析、实时数仓已经成为平台上常见的功能之一。无论是进行实时分析还是离线分析，都离不开数仓中的表数据。
Light Gao
4 个月前
大数据
·
flink
·
实时数仓
·
flinkcdc
·
数据同步
Flink实时数仓同步：切片表实战详解
在大数据领域，初始阶段业务数据通常被存储于关系型数据库，如MySQL。然而，为满足日常分析和报表等需求，大数据平台采用多种同步方式，以适应这些业务数据的不同存储需求。
架构成长指南
5 个月前
doris
·
实时数仓
·
分库分表
·
大数据处理
基于Doris构建亿级数据实时数据分析系统
转载至我的博客 https://www.infrastack.cn ，公众号：架构成长指南随着公司业务快速发展，对业务数据进行增长分析的需求越来越迫切，与此同时我们的业务数据量也在快速激增、每天的数据新增量大概在30w 左右，一年就会产生1 个亿的数据，显然基于传统MySQL数据库已经无法支撑满足以上需求
架构成长指南
5 个月前
clickhouse
·
数据分析
·
doris
·
实时数仓
什么是 doris，为什么几乎国内大厂都会使用它
转载至我的博客 https://www.infrastack.cn ，公众号：架构成长指南今天给各位分享一个非常牛的实时分析型数据库Apache Doris，几乎国内的一二线大厂都在使用它做数据分析，如下图，这只是一小部分
终回首
7 个月前
apache
·
olap
·
实时数仓
·
apache doris
Apache Doris安装部署
Apache Doris安装部署CentOS 7.6 Apache Doris 0.14.0选择合适的版本进行下载，此次选择0.14.0版本
高阳很捷迅
8 个月前
大数据
·
flink
·
实时数仓
实时数仓-Flink使用总结
阿里云实时计算Flink版是阿里云基于Apache Flink构建的企业级、高性能实时大数据处理系统。具备一站式开发运维管理平台，支持作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。本期将对Flink的使用进行总结。
upward337
8 个月前
大数据
·
hadoop
·
zookeeper
·
flink
·
kafka
·
实时数仓
·
flume
尚硅谷大数据项目《在线教育之实时数仓》笔记006
视频地址：尚硅谷大数据项目《在线教育之实时数仓》_哔哩哔哩_bilibili目录第9章 数仓开发之DWD层
upward337
8 个月前
大数据
·
hadoop
·
zookeeper
·
flink
·
kafka
·
实时数仓
·
大数据数仓
尚硅谷大数据项目《在线教育之实时数仓》笔记007
视频地址：尚硅谷大数据项目《在线教育之实时数仓》_哔哩哔哩_bilibili目录第9章 数仓开发之DWD层
upward337
8 个月前
大数据
·
数据仓库
·
flink
·
实时数仓
尚硅谷大数据项目《在线教育之实时数仓》笔记004
视频地址：尚硅谷大数据项目《在线教育之实时数仓》_哔哩哔哩_bilibili目录第8章 数仓开发之DIM层
upward337
9 个月前
大数据
·
数据仓库
·
实时数仓
尚硅谷大数据项目《在线教育之实时数仓》笔记002
视频地址：尚硅谷大数据项目《在线教育之实时数仓》_哔哩哔哩_bilibili目录第06章 数据仓库环境准备
G皮T
10 个月前
大数据
·
数据仓库
·
hadoop
·
hdfs
·
doris
·
实时数仓
·
mpp架构
【大数据】Doris 构建实时数仓落地方案详解（一）：实时数据仓库概述
数据仓库的概念可以追溯到 20 世纪 80 年代，当时 IBM 的研究人员提出了商业数据仓库的概念。数据仓库概念的提出，是为了解决和数据流相关的各种问题，特别是多重数据复制带来的高成本问题。
upward337
10 个月前
大数据
·
数据仓库
·
实时数仓
尚硅谷大数据项目《在线教育之实时数仓》笔记001
视频地址：尚硅谷大数据项目《在线教育之实时数仓》_哔哩哔哩_bilibili目录P001P002P003
IT贫道
10 个月前
数据库
·
数据仓库
·
sql
·
clickhouse
·
olap
·
实时数仓
ClickHouse进阶（七）：Clickhouse数据查询-1
进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！🏡个人主页：含各种IT体系技术,IT贫道_Apache Doris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客
IT贫道
10 个月前
clickhouse
·
olap
·
实时数仓
ClickHouse进阶（三）：ClickHouse 索引
进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！🏡个人主页：含各种IT体系技术，IT贫道_Apache Doris,大数据OLAP体系技术栈,Kerberos安全认证-CSDN博客
IT贫道
10 个月前
java
·
大数据
·
数据库
·
clickhouse
·
flink
·
实时数仓
ClickHouse（二十四）：Flink 写入 ClickHouse API
进入正文前，感谢宝子们订阅专题、点赞、评论、收藏！关注IT贫道，获取高质量博客内容！