helm部署hadoop

(作者:陈玓玏)

参考helm仓库的文档:https://artifacthub.io/packages/helm/apache-hadoop-helm/hadoop

clike 复制代码
helm helm repo add pfisterer-hadoop https://pfisterer.github.io/apache-hadoop-helm/
helm install hadoop pfisterer-hadoop/hadoop

部署好了之后,在k8sdashboard中查看,可以看到datanode、namenode等pod,将service的type改为NodePort,然后用ip+端口号可以访问ui界面。


如果需要修改配置,在官方仓库中,点击default values按钮,可以获取默认的配置,将配置信息粘贴到values.yaml,通过helm uninstall卸载后,再通过命令helm install hadoop pfisterer-hadoop/hadoop -f values.yaml可以根据新配置重新部署。

比如我现在只有1个datanode,我想改成3个datanode,复制粘贴配置信息到values.yaml(没有就自己创建),更改datanode的replicas为3,先卸载,再重新执行install命令。(不知道有没有直接更新配置后升级的操作,helm不像k8s有apply命令可以直接更新,后面再试试k8s部署,可能更好些)

更改前,只有一个datanode:

更改配置:

再查看,就有3个datanode了:

相关推荐
梦游钓鱼35 分钟前
在window终端创建docker容器的问题
运维·docker·容器
向日葵花子(* ̄︶ ̄)2 小时前
hive sql limit offset不起作用
hadoop
2302_799525744 小时前
【Hadoop】如何理解MapReduce?
数据库·hadoop·mapreduce
海鸥814 小时前
在 k8s中查看最大 CPU 和内存的极限
linux·容器·kubernetes
火龙谷5 小时前
hadoop第3课(hdfs shell常用命令)
hadoop·hdfs·npm
rocksun5 小时前
使用GITOPS简化KUBERNETES实施:最佳实践
kubernetes
海鸥8113 小时前
查看k8s集群的资源使用情况
云原生·容器·kubernetes
云上艺旅13 小时前
K8S学习之基础十八:k8s的灰度发布和金丝雀部署
学习·云原生·容器·kubernetes
StableAndCalm15 小时前
什么是hive
数据仓库·hive·hadoop
Hellc00718 小时前
Docker 部署 MongoDB 并持久化数据
mongodb·docker·容器