测试集群hdfs和mapreduce

测试hdfs上传文件

1.创建一个data.txt文件

2.创建一个hdfs的文件夹

3.将本地文件上传到hdfs系统

4.查看文件上传

到这个目录下 /usr/local/hadoop/tmp/dfs/data/current/BP-21346944-172.18.0.2-1773114044674/current/finalized/subdir0/subdir0

会发现master,slave1,slave3存储了相同的内容,但是slave2没有。对应第一个图

测试wordcount

1.在上面的基础上,运行mapreduce wordcount的例子

cd /usr/local/hadoop/share/hadoop/mapreduce/

2.查看运行结果

相关推荐
运维行者_4 小时前
OpManager MSP NetFlow Analyzer集成解决方案,应对多客户端网络流量监控挑战
大数据·运维·服务器·网络·数据库·自动化·运维开发
极创信息9 小时前
信创系统认证服务怎么做?从适配到验收全流程指南
java·大数据·运维·tomcat·健康医疗
大大大大晴天️10 小时前
Flink技术实践-Flink SQL 开发中的隐蔽陷阱
大数据·sql·flink
Gofarlic_OMS11 小时前
Windchill的license合规使用报告自动化生成与审计追踪系统
大数据·运维·人工智能·云原生·自动化·云计算
xcbrand11 小时前
文旅行业品牌策划公司找哪家
大数据·运维·人工智能·python
zxsz_com_cn12 小时前
设备预测性维护故障预警规则与原理解析
大数据·人工智能
hughnz13 小时前
AI和自动化让油田钻工慢慢消失
大数据·人工智能
juniperhan13 小时前
Flink 系列第8篇:Flink Checkpoint 全解析(原理+流程+配置+优化)
大数据·分布式·flink
GIS数据转换器13 小时前
延凡低成本低空无人机AI巡检方案
大数据·人工智能·信息可视化·数据挖掘·无人机
七夜zippoe14 小时前
OpenClaw 子代理(Subagent)机制详解
大数据·人工智能·subagent·openclaw·子代理