【HDFS】与单测编写相关的一些工具类及方法(大纲篇)持续更新

集群创建启动

MiniDFSCluster

可以用这个类创建一个单进程的DFS集群用来进行单元测试。

一般是采用MiniDFSCluster$Builder去建造出一个MiniDFSCluster对象。builder可以指定很多参数

MiniRouterDFSCluster

用来模拟一个有多台Router的HDFS联邦集群。

写一个测试文件

副本文件

EC文件

GenericTestUtils

等待某个条件为true。

【HDFS】GenericTestUtils#waitFor的使用

相关推荐
G皮T1 天前
【Elasticsearch】OpenDistro Security 中 backend_roles 的设计哲学(含实战验证)
大数据·elasticsearch·kibana·权限管理·role·opensearch·backend role
Java程序员威哥1 天前
SpringBoot2.x与3.x自动配置注册差异深度解析:从原理到迁移实战
java·大数据·开发语言·hive·hadoop·spring boot·后端
dixiuapp1 天前
校园后勤管理平台,如何选择与规划
大数据·人工智能·工单管理系统·院校工单管理系统·物业报修系统
hg01181 天前
埃塞俄比亚启动建设非洲最大机场
大数据
Hello.Reader1 天前
Flink Standalone 从 0 到可运维的 Session/HA 集群模板(附配置清单)
大数据·flink
talle20211 天前
Spark分布式计算框架介绍
大数据·分布式·spark·rdd
Leon Cheng1 天前
工作流引擎在AI Agent中的应用
大数据·人工智能
华南首席酱油官1 天前
精工筑净 标杆引领:净化板厂家赋能净化彩钢板行业新高度
大数据·人工智能
【赫兹威客】浩哥1 天前
【赫兹威客】Hadoop完全分布式克隆文件部署教程
大数据·hadoop·分布式
你才是臭弟弟1 天前
Apache Flink+Apache Iceberg(协作关系)
大数据·flink·apache