helm部署hadoop

(作者:陈玓玏)

参考helm仓库的文档:https://artifacthub.io/packages/helm/apache-hadoop-helm/hadoop

clike 复制代码
helm helm repo add pfisterer-hadoop https://pfisterer.github.io/apache-hadoop-helm/
helm install hadoop pfisterer-hadoop/hadoop

部署好了之后,在k8sdashboard中查看,可以看到datanode、namenode等pod,将service的type改为NodePort,然后用ip+端口号可以访问ui界面。


如果需要修改配置,在官方仓库中,点击default values按钮,可以获取默认的配置,将配置信息粘贴到values.yaml,通过helm uninstall卸载后,再通过命令helm install hadoop pfisterer-hadoop/hadoop -f values.yaml可以根据新配置重新部署。

比如我现在只有1个datanode,我想改成3个datanode,复制粘贴配置信息到values.yaml(没有就自己创建),更改datanode的replicas为3,先卸载,再重新执行install命令。(不知道有没有直接更新配置后升级的操作,helm不像k8s有apply命令可以直接更新,后面再试试k8s部署,可能更好些)

更改前,只有一个datanode:

更改配置:

再查看,就有3个datanode了:

相关推荐
nathan052915 小时前
Kubernetes 实战练习指南
云原生·容器·kubernetes
Agatha方艺璇16 小时前
Hive基础简介
数据仓库·hive·hadoop
無名之輩16 小时前
Nvidia Device Plugin入门二之envvar策略
kubernetes
syty202017 小时前
K8s是什么
容器·kubernetes·dubbo
IT研究室18 小时前
大数据毕业设计选题推荐-基于大数据的国内旅游景点游客数据分析系统-Spark-Hadoop-Bigdata
大数据·hadoop·spark·毕业设计·源码·数据可视化·bigdata
Lx35219 小时前
YARN资源调度优化:最大化集群利用率
大数据·hadoop
灵犀物润20 小时前
Kubernetes 配置检查与发布安全清单
安全·容器·kubernetes
360智汇云21 小时前
k8s交互桥梁:走进Client-Go
golang·kubernetes·交互
xy_recording21 小时前
Day20 K8S学习
学习·容器·kubernetes
衍余未了1 天前
k8s 内置的containerd配置阿里云个人镜像地址及认证
java·阿里云·kubernetes