Apache Ozone 2.0.0集群部署

单机部署参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

安装部署

官方参考:Documentation for Apache Ozone

准备环境

环境准备参考:Linux环境下Hadoop3.4.0集群部署-CSDN博客

1->4-b

参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

c、创建workers

cpp 复制代码
touch /usr/local/soft/ozone-2.0.0/etc/hadoop/workers

里面添加

cpp 复制代码
node11
node12
node13

5、集群拷贝

cpp 复制代码
scp -r /usr/local/soft/ozone-2.0.0 root@node12:/usr/local/soft
scp -r /usr/local/soft/ozone-2.0.0 root@node13:/usr/local/soft
scp /etc/profile root@node12:/etc/profile
scp /etc/profile root@node13:/etc/profile

进入node12、node13执行

cpp 复制代码
source /etc/profile

如果之前初始化过,需要删除node节点的数据

cpp 复制代码
rm -fr /data/ozone/

6、初始化Ozone集群

在启动 Ozone 集群之前,需要依次初始化 SCM 和 OM。

以下在node11节点执行

a、初始化 SCM
cpp 复制代码
ozone scm --init

运行SCM

cpp 复制代码
ozone --daemon start scm
b、初始化OM(scm需要启动状态)
cpp 复制代码
ozone om --init

启动OM

cpp 复制代码
ozone --daemon start om

注意 : 如果 SCM 未启动,om --init 命令会失败,同样,如果磁盘上的元数据缺失,SCM 也无法启动,所以请确保 scm --initom --init 两条命令都成功执行了。

c、初始化DataNode(或者直接执行第7步)

接下来启动 Datanode,在每个 Datanode 上运行下面的命令:

cpp 复制代码
ozone --daemon start datanode

7、启动与关闭

如果首次执行第6步,代表已经启动,这里不用启动了

启动

cpp 复制代码
start-ozone.sh

关闭

cpp 复制代码
stop-ozone.sh

8、浏览器验证

a、访问om web

地址:http://node11:9874/

b、访问scm web

地址:http://node11:9876/

c、访问datanode

地址:http://node11:9882/

9、cli命令

参考官网: 参考官方文档:Documentation for Apache Ozone

相关推荐
fastjson_10 小时前
Hadoop之Yarn
大数据·hadoop·npm
fastjson_14 小时前
Hive的介绍和使用
数据仓库·hive·hadoop
光电的一只菜鸡2 天前
小白从零开始学agent(二)——如何高效编写 Prompt 与 Skill
hadoop·microsoft·prompt
ha_lydms6 天前
Hologres 简介
大数据·hadoop·阿里云·mapreduce·yarn·dataworks·hologres
Francek Chen9 天前
【大数据处理与分析】实验5:MapReduce初级编程实践
大数据·hadoop·分布式·mapreduce
Zhu75814 天前
在k8s集群环境部署高可用的Apache Hadoop3.1.1定制版集群
hadoop·kubernetes
还有你Y14 天前
软件工程架构
hadoop·架构·软件工程
曾阿伦19 天前
Windows 下运行 Hadoop 并部署到 AWS EMR 指南
hadoop·windows·aws
极光代码工作室19 天前
基于Spark的日志监控与分析平台
大数据·hadoop·python·spark·数据可视化
liuxiaowei321 天前
Winform+WPF双框架实战:喷涂工艺SCADA上位机从0到1搭建(附采集监控源码+车间踩坑实录)
大数据·hadoop·wpf