测试集群的功能-执行wordcount程序

具体的操作步骤如下:

  1. 确保hadoop是正确运行的。hdfs和yarn都正常启动了。
  2. 在集群根目录下创建wcinput目录,并在它的下面上传两个文本文件word1.txt, word2.txt,其中保存了要测试的单词信息。
  3. 在任意一台设备中,进入到hadoop的主目录。cd /opt/modele/hadoop-3.1.3
  4. 运行如下命令:

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /wcinput /output

  1. 在如下网站查看运行的过程和记录http://hadoop101:8088/cluster
相关推荐
IvanCodes40 分钟前
六、Hive 分桶
大数据·hive
依年南台41 分钟前
Spark处理过程-转换算子和行动算子
大数据·ajax·spark
中电金信1 小时前
重构金融数智化产业版图:中电金信“链主”之道
大数据·人工智能
七七-d1 小时前
配置Hadoop集群-上传文件
大数据·hadoop·eclipse
心仪悦悦3 小时前
Spark缓存
大数据·缓存·spark
lix的小鱼3 小时前
安装Hadoop并运行WordCount程序
大数据·linux·hadoop
INFINI Labs4 小时前
INFINI Console 纳管 Elasticsearch 9(一):指标监控、数据管理、DSL 语句执行
大数据·elasticsearch·搜索引擎·console
猪猪果泡酒5 小时前
Spark,RDD中的行动算子
大数据·分布式·spark
2401_871290586 小时前
Spark处理过程-转换算子
大数据·分布式·spark