Apache Ozone 2.0.0集群部署

单机部署参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

安装部署

官方参考:Documentation for Apache Ozone

准备环境

环境准备参考:Linux环境下Hadoop3.4.0集群部署-CSDN博客

1->4-b

参考:Apache Ozone 介绍与部署使用(最新版2.0.0)-CSDN博客

c、创建workers

cpp 复制代码
touch /usr/local/soft/ozone-2.0.0/etc/hadoop/workers

里面添加

cpp 复制代码
node11
node12
node13

5、集群拷贝

cpp 复制代码
scp -r /usr/local/soft/ozone-2.0.0 root@node12:/usr/local/soft
scp -r /usr/local/soft/ozone-2.0.0 root@node13:/usr/local/soft
scp /etc/profile root@node12:/etc/profile
scp /etc/profile root@node13:/etc/profile

进入node12、node13执行

cpp 复制代码
source /etc/profile

如果之前初始化过,需要删除node节点的数据

cpp 复制代码
rm -fr /data/ozone/

6、初始化Ozone集群

在启动 Ozone 集群之前,需要依次初始化 SCM 和 OM。

以下在node11节点执行

a、初始化 SCM
cpp 复制代码
ozone scm --init

运行SCM

cpp 复制代码
ozone --daemon start scm
b、初始化OM(scm需要启动状态)
cpp 复制代码
ozone om --init

启动OM

cpp 复制代码
ozone --daemon start om

注意 : 如果 SCM 未启动,om --init 命令会失败,同样,如果磁盘上的元数据缺失,SCM 也无法启动,所以请确保 scm --initom --init 两条命令都成功执行了。

c、初始化DataNode(或者直接执行第7步)

接下来启动 Datanode,在每个 Datanode 上运行下面的命令:

cpp 复制代码
ozone --daemon start datanode

7、启动与关闭

如果首次执行第6步,代表已经启动,这里不用启动了

启动

cpp 复制代码
start-ozone.sh

关闭

cpp 复制代码
stop-ozone.sh

8、浏览器验证

a、访问om web

地址:http://node11:9874/

b、访问scm web

地址:http://node11:9876/

c、访问datanode

地址:http://node11:9882/

9、cli命令

参考官网: 参考官方文档:Documentation for Apache Ozone

相关推荐
牛奶咖啡137 小时前
Linux中安装部署Hadoop集群的保姆级安装配置教程
linux·hadoop·openjdk21安装配置·openjre21安装配置·hadoop集群安装配置·linux的ssh配置·linux实现免密登录配置
Kay_Liang8 小时前
【Hive 踩坑实录】从元数据库初始化到 HiveServer2 启动的全流程问题解决
大数据·linux·hive·hadoop·笔记·mysql·ubuntu
IT学长编程9 小时前
计算机毕业设计 基于Python的电商用户行为分析系统 Django 大数据毕业设计 Hadoop毕业设计选题【附源码+文档报告+安装调试】
大数据·hadoop·python·django·毕业设计·课程设计·电商用户行为分析系统
StarRocks_labs9 小时前
告别 Hadoop,拥抱 StarRocks!政采云数据平台升级之路
大数据·数据库·starrocks·hadoop·存算分离
2501_9387802819 小时前
《不止 MapReduce:Hadoop 与 Spark 的计算模型差异及适用场景分析》
hadoop·spark·mapreduce
2501_938773991 天前
《Hadoop 与 Spark 融合路径:基于 Spark on YARN 的部署与调优技巧》
大数据·hadoop·spark
2501_938773991 天前
大数据离线处理:使用 Airflow 调度 Hive 脚本的工作流设计
大数据·hive·hadoop
智海观潮1 天前
Hive的架构设计和建表语义
大数据·hadoop·apache hive
Timer_Cooker1 天前
Hive 分区表变更字段长度不生效
数据仓库·hive·hadoop
B站_计算机毕业设计之家2 天前
python电商商品评论数据分析可视化系统 爬虫 数据采集 Flask框架 NLP情感分析 LDA主题分析 Bayes评论分类(源码) ✅
大数据·hadoop·爬虫·python·算法·数据分析·1024程序员节