Apache Ozone 2.0.0集群部署

单机部署参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

安装部署

官方参考:Documentation for Apache Ozone

准备环境

环境准备参考:Linux环境下Hadoop3.4.0集群部署-CSDN博客

1->4-b

参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

c、创建workers

cpp 复制代码
touch /usr/local/soft/ozone-2.0.0/etc/hadoop/workers

里面添加

cpp 复制代码
node11
node12
node13

5、集群拷贝

cpp 复制代码
scp -r /usr/local/soft/ozone-2.0.0 root@node12:/usr/local/soft
scp -r /usr/local/soft/ozone-2.0.0 root@node13:/usr/local/soft
scp /etc/profile root@node12:/etc/profile
scp /etc/profile root@node13:/etc/profile

进入node12、node13执行

cpp 复制代码
source /etc/profile

如果之前初始化过,需要删除node节点的数据

cpp 复制代码
rm -fr /data/ozone/

6、初始化Ozone集群

在启动 Ozone 集群之前,需要依次初始化 SCM 和 OM。

以下在node11节点执行

a、初始化 SCM
cpp 复制代码
ozone scm --init

运行SCM

cpp 复制代码
ozone --daemon start scm
b、初始化OM(scm需要启动状态)
cpp 复制代码
ozone om --init

启动OM

cpp 复制代码
ozone --daemon start om

注意 : 如果 SCM 未启动,om --init 命令会失败,同样,如果磁盘上的元数据缺失,SCM 也无法启动,所以请确保 scm --initom --init 两条命令都成功执行了。

c、初始化DataNode(或者直接执行第7步)

接下来启动 Datanode,在每个 Datanode 上运行下面的命令:

cpp 复制代码
ozone --daemon start datanode

7、启动与关闭

如果首次执行第6步,代表已经启动,这里不用启动了

启动

cpp 复制代码
start-ozone.sh

关闭

cpp 复制代码
stop-ozone.sh

8、浏览器验证

a、访问om web

地址:http://node11:9874/

b、访问scm web

地址:http://node11:9876/

c、访问datanode

地址:http://node11:9882/

9、cli命令

参考官网: 参考官方文档:Documentation for Apache Ozone

相关推荐
yumgpkpm4 小时前
hadoop集群搭建 (超详细) 接入Impala、Hive,AI 大模型的数据底座
hive·hadoop·mysql·zookeeper·flink·kafka·hbase
励志成为糕手4 小时前
MapReduce工作流程:从MapTask到Yarn机制深度解析
大数据·hadoop·分布式·mapreduce·yarn
编织幻境的妖5 小时前
Hadoop核心组件及其作用概述
大数据·hadoop·分布式
梦里不知身是客111 天前
hive中metastore 服务的意义
数据仓库·hive·hadoop
计算机毕业编程指导师1 天前
【Python大数据选题】基于Spark+Django的电影评分人气数据可视化分析系统源码 毕业设计 选题推荐 毕设选题 数据分析 机器学习
大数据·hadoop·python·计算机·spark·django·电影评分人气
梦里不知身是客111 天前
hive让分区关联数据的三种方式
数据仓库·hive·hadoop
m0_740043732 天前
Spring_全面详解入门
数据仓库·hive·hadoop
皓空揽月2 天前
windows安装hadoop2.7.2教程(单机版)
hadoop·windows
阿杰同学4 天前
Hadoop 面试题及答案整理,最新面试题
大数据·hadoop·分布式
皓空揽月4 天前
Ubuntu 单机安装 Hadoop 3.2.4教程
linux·hadoop·ubuntu