k8s1.27使用NFS作为StorageClass

1. 概述

在日常学习与企业内网环境中，可能并没有条件使用Ceph等分布式存储，这时可以使用NFS作为StorageClass。

NFS代表网络文件系统（Network File System），它是一种允许计算机通过网络共享文件和存储设备的协议。

2. 环境说明

本文nfs server所在服务器的操作系统为Ubuntu 22.04.2, IP为192.168.3.10

kubernetes版本为1.27.2
kubernetes节点的操作系统为RockyLinux 9.2 x64

3. k8s集群外部署NFS server

安装nfs server

apt install -y nfs-kernel-server

配置nfs server

mkdir /data/nfs
chmod a+rw /data/nfs/
echo '/data/nfs *(rw,sync,no_subtree_check,no_root_squash,insecure)' >> /etc/exports
# 使配置生效
exportfs -r
# 查看当前配置
exportfs

systemctl restart rpcbind
systemctl enable rpcbind
systemctl restart nfs-server
systemctl enable nfs-server

# 查看rpc服务的注册情况
rpcinfo -p localhost |grep nfs
showmount -e 192.168.3.10

4. k8s集群内创建Storage class

官方文档: https://github.com/kubernetes-sigs/nfs-subdir-external-provisioner

4.1 所有k8s节点安装nfs client

# centos/rockylinux
yum install -y nfs-utils

4.2 为NFS设置rbac

创建文件rbac.yaml

apiVersion: v1
kind: ServiceAccount
metadata:
  name: nfs-client-provisioner
  # replace with namespace where provisioner is deployed
  namespace: default
---
kind: ClusterRole
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  name: nfs-client-provisioner-runner
rules:
  - apiGroups: [""]
    resources: ["nodes"]
    verbs: ["get", "list", "watch"]
  - apiGroups: [""]
    resources: ["persistentvolumes"<