Apache Ozone 2.0.0集群部署

单机部署参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

安装部署

官方参考:Documentation for Apache Ozone

准备环境

环境准备参考:Linux环境下Hadoop3.4.0集群部署-CSDN博客

1->4-b

参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

c、创建workers

cpp 复制代码
touch /usr/local/soft/ozone-2.0.0/etc/hadoop/workers

里面添加

cpp 复制代码
node11
node12
node13

5、集群拷贝

cpp 复制代码
scp -r /usr/local/soft/ozone-2.0.0 root@node12:/usr/local/soft
scp -r /usr/local/soft/ozone-2.0.0 root@node13:/usr/local/soft
scp /etc/profile root@node12:/etc/profile
scp /etc/profile root@node13:/etc/profile

进入node12、node13执行

cpp 复制代码
source /etc/profile

如果之前初始化过,需要删除node节点的数据

cpp 复制代码
rm -fr /data/ozone/

6、初始化Ozone集群

在启动 Ozone 集群之前,需要依次初始化 SCM 和 OM。

以下在node11节点执行

a、初始化 SCM
cpp 复制代码
ozone scm --init

运行SCM

cpp 复制代码
ozone --daemon start scm
b、初始化OM(scm需要启动状态)
cpp 复制代码
ozone om --init

启动OM

cpp 复制代码
ozone --daemon start om

注意 : 如果 SCM 未启动,om --init 命令会失败,同样,如果磁盘上的元数据缺失,SCM 也无法启动,所以请确保 scm --initom --init 两条命令都成功执行了。

c、初始化DataNode(或者直接执行第7步)

接下来启动 Datanode,在每个 Datanode 上运行下面的命令:

cpp 复制代码
ozone --daemon start datanode

7、启动与关闭

如果首次执行第6步,代表已经启动,这里不用启动了

启动

cpp 复制代码
start-ozone.sh

关闭

cpp 复制代码
stop-ozone.sh

8、浏览器验证

a、访问om web

地址:http://node11:9874/

b、访问scm web

地址:http://node11:9876/

c、访问datanode

地址:http://node11:9882/

9、cli命令

参考官网: 参考官方文档:Documentation for Apache Ozone

相关推荐
小邓睡不饱耶2 小时前
Hadoop:从架构原理到企业级实战,大数据处理入门到精通
大数据·hadoop·架构
Francek Chen2 小时前
【大数据基础】大数据处理架构Hadoop:03 Hadoop的安装与使用
大数据·hadoop·分布式·架构
小邓睡不饱耶2 小时前
Hadoop 进阶:企业级项目实战、生态深度整合与故障排查
大数据·hadoop·分布式
小邓睡不饱耶2 小时前
深耕 Hadoop:内核优化、分布式一致性与大规模集群实战
大数据·hadoop·分布式
weixin_462446231 天前
Hive Metastore 使用 MySQL 8(CJ 驱动)完整配置实战(含完整 Shell 脚本)
hive·hadoop·mysql
zhangkaixuan4561 天前
Paimon 读取数据流程深度解析
大数据·hadoop·flink·apache·paimon
yumgpkpm2 天前
在AI语言大模型时代 Cloudera CDP(华为CMP 鲲鹏版)对自有知识的保护
人工智能·hadoop·华为·zookeeper·spark·kafka
zhangxl-jc2 天前
Hive基本操作日记
数据仓库·hive·hadoop
计算机毕业编程指导师2 天前
【Python大数据选题】基于Hadoop+Spark奥运会金牌榜可视化分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习 数据挖掘
大数据·hadoop·python·计算机·spark·毕业设计·奥运会金牌
TTBIGDATA2 天前
【Hue】Hue 访问 Hadoop 权限问题出现 403 的解决办法
大数据·hadoop·分布式·ambari·hdp·hue·bigtop