hadoop的MapReduce

1.什么是计算(广义): 内容分析, 得到需要的结果

也就是一系列, 基于数据得出的结论。 这些就是我们所说的计算。

2.分布式计算模式:

一:分散-汇总模式:数据分片,多个服务器负责各个部分数据处理,最后结果汇总

二:中心调度模式: 1. 由一个节点作为中心调度管理者 2. 将任务划分为几个具体步骤 3. 管理者安排每个机器执行任务 4. 最终得到结果数据

3.MapReduce(hadoop的计算组件)(hive的底层工具)

一:利用的是分散-汇总模式

二:编程接口:map(分散)与reduce(汇总)

相关推荐
进阶的猪14 分钟前
使用printk对SPI子系统全过程的追踪
linux·服务器
2301_8035545224 分钟前
Linux里面的文件描述符和windows里面的句柄
linux·运维·服务器
星马梦缘36 分钟前
如何切换window-ubuntu双系统【方案一】
linux·ubuntu·双系统
idolao40 分钟前
CentOS 7 安装 jakarta-tomcat-connectors-jk2-src-current.tar.gz 详细步骤(解压、编译、配置)
linux·centos·tomcat
学习3人组44 分钟前
OEE(设备综合效率)的标准定义、公式、损失分类、以及在工位触屏/MES里怎么采集和统计
大数据·网络·数据库
财迅通Ai1 小时前
百通能源:2026年一季度营收稳步增长,资产结构持续优化
大数据·人工智能·能源·百通能源
千匠网络1 小时前
数智全链赋能,千匠网络钢铁能源供应链平台解决方案
大数据·人工智能
时空自由民.1 小时前
蓝牙协议栈介绍
linux·网络·单片机
WL_Aurora2 小时前
MapReduce经典例题【第一期】
大数据·mapreduce
Datakeji2 小时前
维恩波特Vairnport商业逻辑
大数据·人工智能·区块链