Apache Ozone 2.0.0集群部署

单机部署参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

安装部署

官方参考:Documentation for Apache Ozone

准备环境

环境准备参考:Linux环境下Hadoop3.4.0集群部署-CSDN博客

1->4-b

参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

c、创建workers

cpp 复制代码
touch /usr/local/soft/ozone-2.0.0/etc/hadoop/workers

里面添加

cpp 复制代码
node11
node12
node13

5、集群拷贝

cpp 复制代码
scp -r /usr/local/soft/ozone-2.0.0 root@node12:/usr/local/soft
scp -r /usr/local/soft/ozone-2.0.0 root@node13:/usr/local/soft
scp /etc/profile root@node12:/etc/profile
scp /etc/profile root@node13:/etc/profile

进入node12、node13执行

cpp 复制代码
source /etc/profile

如果之前初始化过,需要删除node节点的数据

cpp 复制代码
rm -fr /data/ozone/

6、初始化Ozone集群

在启动 Ozone 集群之前,需要依次初始化 SCM 和 OM。

以下在node11节点执行

a、初始化 SCM
cpp 复制代码
ozone scm --init

运行SCM

cpp 复制代码
ozone --daemon start scm
b、初始化OM(scm需要启动状态)
cpp 复制代码
ozone om --init

启动OM

cpp 复制代码
ozone --daemon start om

注意 : 如果 SCM 未启动,om --init 命令会失败,同样,如果磁盘上的元数据缺失,SCM 也无法启动,所以请确保 scm --init 和 om --init 两条命令都成功执行了。

c、初始化DataNode(或者直接执行第7步)

接下来启动 Datanode,在每个 Datanode 上运行下面的命令:

cpp 复制代码
ozone --daemon start datanode

7、启动与关闭

如果首次执行第6步,代表已经启动,这里不用启动了

启动

cpp 复制代码
start-ozone.sh

关闭

cpp 复制代码
stop-ozone.sh

8、浏览器验证

a、访问om web

地址:http://node11:9874/

b、访问scm web

地址:http://node11:9876/

c、访问datanode

地址:http://node11:9882/

9、cli命令

参考官网: 参考官方文档:Documentation for Apache Ozone

相关推荐
Sayai20 小时前
Hadoop 集群安全加固实战:YARN 未授权访问漏洞修复,firewalld 白名单 + Nginx 反向代理 Basic Auth 全流程
运维·hadoop·nginx·安全·网络安全
IT小小猪1 天前
# Hadoop 3.3.6 完全分布式集群部署知识库
hadoop·分布式·eclipse
泡干脆面就番茄1 天前
Hive入门:架构解析与安装部署实录
大数据·数据仓库·hive·hadoop·架构
yyk333241 天前
Hive架构
hive·hadoop·架构
计算机编程指导师1 天前
计算机毕设选题:基于Spark+Django的水质多指标关联分析与可视化系统源码 毕业设计 选题推荐 数据分析 机器学习
大数据·hadoop·python·spark·毕业设计·课程设计·水质
计算机编程指导师1 天前
【大数据毕设】Hadoop+Spark台北市住宅价格数据可视化分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
大数据·hadoop·python·spark·毕业设计·课程设计·住宅价格
计算机编程指导师1 天前
【计算机毕设推荐】基于Hadoop+Spark的公共交通运营数据分析与可视化系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
大数据·hadoop·python·计算机·数据分析·spark·交通
计算机编程指导师2 天前
【计算机毕设选题推荐】基于Hadoop的宫颈癌变进程光谱数据分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
大数据·hadoop·python·数据分析·spark·毕业设计·宫颈癌变
计算机编程指导师2 天前
【计算机毕设选题推荐】基于Hadoop+Spark的化妆品销售大数据分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
大数据·hadoop·python·spark·毕业设计·课程设计·化妆品
计算机编程指导师2 天前
计算机毕设选题推荐:Hadoop大数据下的个体肥胖健康风险评估与可视化系统源码 毕业设计 毕设选题 数据分析 机器学习
大数据·hadoop·python·spark·毕业设计·课程设计·肥胖健康风险