技术栈
图文展示HDFS、YARN、MapReduce三者关系
计算机人哪有不疯的
2025-05-13 22:27
MapReduce架构概述
MapReduce将计算过程分为两个阶段:Map和Reduce
(1)Map阶段并行处理输入数据
(2)Reduce阶段对Map结果进行汇总
HDFS、YARN、MapReduce三者关系
大数据
spark
上一篇:
【001】renPy android端启动流程分析
下一篇:
vue3+dhtmlx-gantt实现甘特图展示
相关推荐
武子康
6 小时前
大数据-240 离线数仓 - 广告业务 Hive ADS 实战:DataX 将 HDFS 分区表导出到 MySQL
大数据
·
后端
·
apache hive
字节跳动数据平台
1 天前
5000 字技术向拆解 | 火山引擎多模态数据湖如何释放模思智能的算法生产力
大数据
武子康
1 天前
大数据-239 离线数仓 - 广告业务实战:Flume 导入日志到 HDFS,并完成 Hive ODS/DWD 分层加载
大数据
·
后端
·
apache hive
字节跳动数据平台
2 天前
代码量减少 70%、GPU 利用率达 95%:火山引擎多模态数据湖如何释放模思智能的算法生产力
大数据
得物技术
2 天前
深入剖析Spark UI界面:参数与界面详解|得物技术
大数据
·
后端
·
spark
武子康
2 天前
大数据-238 离线数仓 - 广告业务 Hive分析实战:ADS 点击率、购买率与 Top100 排名避坑
大数据
·
后端
·
apache hive
武子康
3 天前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据
·
后端
·
apache hive
大大大大晴天
3 天前
Flink生产问题排障-Kryo serializer scala extensions are not available
大数据
·
flink
武子康
5 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据
·
后端
·
apache hive
肌肉娃子
6 天前
20260227.spark.Spark 性能刺客:千万别在 for 循环里写 withColumn
spark
热门推荐
01
GitHub 镜像站点
02
OpenClaw 使用和管理 MCP 完全指南
03
OpenClaw + 飞书(Feishu)环境搭建指南
04
OpenClaw优化飞书API 额度已耗尽问题
05
Claude Code + GLM4.7 避坑指南:解决 Unable to connect to Anthropic services
06
本地部署 OpenClaw + DeepSeek-R1 完全指南
07
Window 10部署openclaw报错node.exe : npm error code 128
08
小黑课堂计算机二级WPSoffice题库软件下载安装教程(2026年3月最新版)
09
OpenClaw大龙虾机器人完整安装教程
10
Clawdbot部署教程:解决‘gateway token missing’授权问题的完整步骤