21 使用Hadoop Java API读取序列化文件

在上一个实验中我们筛选了竞赛网站日志数据中2021/1和2021/2的数据以序列化的形式写到了hdfs上。

接下来我们使用Java API 读取序列化的数据保存到磁盘中。

其他命令操作请参考:16 Java API操作HDFS-CSDN博客

1.我直接在上一个项目中test/java目录下创建com.maidu.selectdata.test.APITest类,test目录下的内容在打包时不会出现在jar文件中,仅供测试所用。

2.编写代码

3.运行 选择方法名右击运行

测试成功

4.进入D盘查看文件

写入文件的数据

相关推荐
mask哥几秒前
详解flink java基础(一)
java·大数据·微服务·flink·实时计算·领域驱动
克拉克盖博18 分钟前
chapter03_Bean的实例化与策略模式
java·spring·策略模式
Franklin20 分钟前
Python界面设计【QT-creator基础编程 - 01】如何让不同分辨率图像自动匹配graphicsView的窗口大小
开发语言·python·qt
DashVector28 分钟前
如何通过Java SDK分组检索Doc
java·数据库·面试
郝学胜-神的一滴34 分钟前
深入理解QFlags:Qt中的位标志管理工具
开发语言·c++·qt·程序人生
程序员清风1 小时前
跳表的原理和时间复杂度,为什么还需要字典结构配合?
java·后端·面试
渣哥1 小时前
Kafka消息丢失的3种场景,生产环境千万要注意
java
渣哥1 小时前
ElasticSearch深度分页的致命缺陷,千万数据查询秒变蜗牛
java
Olrookie1 小时前
XXL-JOB GLUE模式动态数据源实践:Spring AOP + MyBatis 解耦多库查询
java·数据库·spring boot
柯南二号1 小时前
【Java后端】MyBatis-Plus 原理解析
java·开发语言·mybatis