在K8s中部署动态nfs存储provisioner

背景

之前,我已经在一台worker node上安装了local lvm 的provisioner来模拟需要本地高IOPS的数据库等stafeful应用的实现。

为了后续给虚拟机里的K8s集群安装可用的metrics和logs监控系统(metrics和logs的时序数据库需要永久存储),特为K8s 集群提供基于nfs的文件服务器一台,并安装nfs provisioner, 以便实现动态分配nfs volume给pods使用的目的。

实现一套nfs server/client 系统

Step1 nfs server installation

Target :File server

IP: 192.168.80.223

NFS folder:/mnt/nfs_share

bash 复制代码
   # 安装nfs server
   25  sudo apt install -y nfs-kernel-server 
   #创建目录
   26  sudo mkdir -p /mnt/nfs_share  
   27  sudo chmod 777 /mnt/nfs_share 
   28  sudo vim /etc/exports 
   #添加一行  /mnt/nfs_share *(rw,sync,no_root_squash,no_subtree_check)
   30  sudo exportfs -ra
   # 重启nfs服务
   33  sudo systemctl restart nfs-server
    # 确保开机自启动
   34  sudo systemctl enable nfs-server 

Step2 nfs-clients installation

Target :K8s worker nodes

NFS folder:/mnt/nfs_client

bash 复制代码
  157  sudo apt install -y nfs-common
  158  sudo mkdir -p /mnt/nfs_client
  159  sudo mount -t nfs 192.168.80.223:/mnt/nfs_share /mnt/nfs_client
  160  vim /etc/fstab
#添加一行 192.168.80.223:/mnt/nfs_share  /mnt/nfs_client  nfs  defaults  0  0

实现nfs provisioner

step1 installing

Target:K8s cp(master) node

bash 复制代码
#通过Helm 添加nfs provisioner,先添加相应chart的repo
  564  helm repo add nfs-subdir-external-provisioner https://kubernetes-sigs.github.io/nfs-subdir-external-provisioner/ 
  565  helm repo update
   # 安装nfs provisioner,我忘记将这个nfs provisioner需要的controller等资源单独放一个namespace了。
  566  helm install nfs-provisioner nfs-subdir-external-provisioner/nfs-subdir-external-provisioner   \
  --set nfs.server=192.168.80.223  \
  --set nfs.path=/mnt/nfs_share

step2 验证

bash 复制代码
# sc是cluster wide的资源,所以不用-n 指定namespace
root@master:/opt/k8sconfig$sudo kubectl get sc 
NAME                  PROVISIONER                                                     RECLAIMPOLICY   VOLUMEBINDINGMODE      ALLOWVOLUMEEXPANSION   AGE
nfs-client            cluster.local/nfs-provisioner-nfs-subdir-external-provisioner   Delete          Immediate              true                   36m
topolvm-provisioner   topolvm.io                                                      Delete          WaitForFirstConsumer   true                   5d19h
# 查看controller的pod 是否在运行
root@master:/opt/k8sconfig$sudo kubectl get pods 
NAME                                                              READY   STATUS             RESTARTS   AGE
nfs-provisioner-nfs-subdir-external-provisioner-5796dc5fcfq6k2c   1/1     Running            0          36m
相关推荐
qq_312920116 分钟前
K8s存储类(StorageClass)设计与Ceph集成实战
ceph·容器·kubernetes
Nazi67 分钟前
kubeadm部署k8s集群环境搭建
云原生·容器·kubernetes
Brilliantee40410 分钟前
藏在 K8s 幕后的记忆中枢(etcd)
容器·kubernetes·etcd
bing.shao11 分钟前
gRPC 选型 etcd 的核心优势分析
数据库·微服务·云原生·golang·etcd
焯集新人2 小时前
K8S高可用集群
云原生·容器·kubernetes
楚禾Noah2 小时前
【通用常识】YAML 中的高阶语法
运维·docker·容器
小白不想白a3 小时前
【Ansible】变量、机密、事实
运维·云原生·ansible
东心十10 小时前
Win11安装WSL、Docker Desktop
运维·docker·容器
tb_first13 小时前
k8sday13数据存储(1.5/2)
linux·运维·服务器·云原生·容器·kubernetes
星眠海雾13 小时前
k8s集合
云原生·容器·kubernetes