技术栈
wordcount
lwprain
3 个月前
hadoop
·
wordcount
hadoop3跑第一个例子wordcount
1、创建目录2、创建测试文件,并上传文件到hdfs3、进入hadoop-3目录,并创建测试文件创建目录 mkdir wcinput cd wcinput 保存wc.input nano wc.input
疯狂的小强呀
9 个月前
spark
·
scala
·
wordcount
·
统计词频
利用scala书写spark程序实现wordCount
实验环境:虚拟机(centos)上创建了三台集群,部署了Hadoop,words文档放在HDFS上的目录下 所用版本如下: <hadoop.version>2.7.7</hadoop.version> <spark.version>2.4.5</spark.version> <scala.version>2.12.10</scala.version>
开着拖拉机回家
1 年前
hadoop
·
mapreduce
·
maptask
·
reducetask
·
wordcount
·
shuffle过程
·
mapreduce运行机制
【Hadoop】MapReduce详解
🦄 个人主页——🎐开着拖拉机回家_大数据运维-CSDN博客 🎐✨🍁🪁🍁🪁🍁🪁🍁🪁🍁 🪁🍁🪁🍁🪁🍁🪁 🪁🍁🪁🍁🪁🍁🪁🍁🪁🍁🪁🍁