尚硅谷大数据项目《在线教育之离线数仓》笔记005

视频地址:尚硅谷大数据项目《在线教育之离线数仓》_哔哩哔哩_bilibili

目录

[第10章 数仓开发之DWS层](#第10章 数仓开发之DWS层)

P071

P072

P073

P074

P075

P076

P077

P078

P079

P080

P081

P082

P083

P084

P085

P086


第10章 数仓开发之DWS层

P071

设计要点:

(1)DWS层的设计参考指标体系

(2)DWS层的数据存储格式为orc列式存储+snappy压缩。

(3)DWS层表名的命名规范为dws_数据域_统计粒度_业务过程_统计周期(1d/nd/td)。

注:1d标识最近1日,nd表示最近n日,td表示历史至今。

P072

10.1.1 交易域用户粒度用户加购最近1日汇总表

10.1.2 交易域用户粒度用户支付最近1日汇总表

P073

10.1.3 交易域会话粒度用户下单最近1日汇总表

P074

10.1.4 考试域试卷粒度考试最近1日汇总表

P075

10.1.5 考试域试卷分数段粒度最近1日汇总表

P076

10.1.6 考试域题目粒度考试最近1日汇总表

P077

10.1.7 流量域会话粒度页面浏览最近1日汇总表

P078

10.1.8 数据装载脚本

P079

10.2.1 交易域用户粒度用户加购最近n日汇总表

10.2.2 交易域用户粒度用户支付最近n日汇总表

P080

10.2.3 考试域试卷粒度考试最近n日汇总表

P081

10.2.4 考试域试卷分数段粒度最近n日汇总表

10.2.5 考试域题目粒度考试最近n日汇总表

P082

10.2.6 数据装载脚本

P083

10.3.1 交易域用户粒度下单历史至今汇总表

P084

10.3.2 交易域用户粒度用户支付历史至今汇总表

P085

10.3.3 用户域用户粒度用户登录历史至今汇总表

P086

10.3.4 数据装载脚本

相关推荐
大大大大晴天5 小时前
Hudi技术内幕:Key Generation原理与实践
大数据
得物技术4 天前
从埋点需求到规则资产:Hermes Agent 重构得物数仓工作流
大数据·llm·ai编程
久美子4 天前
AI驱动数仓建设的Harness工程实践——本体建模、知识分层与上下文工程
大数据
大树884 天前
金刚石散热越强,管路越先见顶
大数据·运维·服务器·人工智能·ai
大志哥1234 天前
ES和Logstash日志链路系统上线后遭遇切片爆炸(解决)
大数据·elasticsearch
果丁智能4 天前
物联网智能锁赋能集中式住宿:身份核验与远程权限管控的全链路技术实践
大数据·人工智能·物联网·智能家居
ApacheSeaTunnel4 天前
实战演示 | 基于 Apache SeaTunnel 与 Apache DolphinScheduler 实现 MySQL 到 Doris 离线定时增量同步
大数据·mysql·开源·doris·数据集成·seatunnel·数据同步
weixin_397574094 天前
PDF复杂表格的1:1还原引擎:跨页表格自动拼接技术实战
大数据·人工智能·pdf
极光代码工作室4 天前
基于数据仓库的电商数据分析平台
大数据·hadoop·python·spark·数据可视化
秋名山码民4 天前
Graph RAG 深度解析:从向量检索到知识推理的技术演进
大数据·人工智能·rag