Kubernetes(K8S)使用PV和PVC做存储安装mysql

环境准备

首先你需要一个k8s环境，可以参考我写的文章：https://blog.csdn.net/m0_51510236/article/details/130842122

什么是PV和PVC

我们可以简单看一下官网的描述：https://kubernetes.io/zh-cn/docs/concepts/storage/persistent-volumes/#introduction

持久卷（PersistentVolume，PV） 是集群中的一块存储，可以由管理员事先制备， 或者使用存储类（Storage Class）来动态制备。 持久卷是集群资源，就像节点也是集群资源一样。PV 持久卷和普通的 Volume 一样， 也是使用卷插件来实现的，只是它们拥有独立于任何使用 PV 的 Pod 的生命周期。 此 API 对象中记述了存储的实现细节，无论其背后是 NFS、iSCSI 还是特定于云平台的存储系统。

持久卷申领（PersistentVolumeClaim，PVC） 表达的是用户对存储的请求。概念上与 Pod 类似。 Pod 会耗用节点资源，而 PVC 申领会耗用 PV 资源。Pod 可以请求特定数量的资源（CPU 和内存）；同样 PVC 申领也可以请求特定的大小和访问模式 （例如，可以要求 PV 卷能够以 ReadWriteOnce、ReadOnlyMany 或 ReadWriteMany 模式之一来挂载，参见访问模式）。

本篇文章就用上面提到的nfs来搭建pv和pvc并部署mysql

环境准备

首先我们需要搭建一个k8s集群，并且准备一台nfs服务器，为了方便我就使用k8s的主节点作为nfs服务器，服务器列表如下表：

IP地址	服务器用途
192.168.1.160	k8s-master，k8s的主节点和nfs服务器
192.168.1.161	k8s-node01，k8s的第一个工作节点
192.168.1.162	k8s-node02，k8s的第二个工作节点

配置nfs

安装nfs

首先我们需要在三台服务器单中都需要安装nfs软件包，使用如下命令进行安装：

yum install -y nfs-utils

如图三台服务器都需要安装：

配置nfs服务端

然后我们需要在nfs的主服务器暴露一个 /data/nfs/mysql 目录，我们需要修改 /etc/exports 配置文件，需要将这一行加在里面：

/data/nfs/mysql *(rw,sync,no_root_squash)

可以直接执行这行命令，第一行为创建这个目录，第二行为修改文件

mkdir -p /data/nfs/mysql
cat >> /etc/exports << EOF
/data/nfs/mysql *(rw,sync,no_root_squash)
EOF

然后我们需要启动nfs服务，只需要在nfs服务器上执行：

systemctl enable --now nfs-server

然后我们执行这行命令，看目录是否暴露：

showmount -e nfs服务器地址

可以看到目录暴露成功：

创建命名空间

我们需要创建一个命名空间，当然也可以越过这一步，这里创建命名空间的目的只是为了更接近生产环境，创建命名空间的yaml文件：

apiVersion: v1
kind: Namespace
metadata:name: deploy-test
spec: {}
status: {}

上面的yaml文件创建了一个名为 deploy-test 的命名空间，可以查看创建结果：

配置pv和pvc

pv的yaml文件

注意按照提示修改内容：

apiVersion: v1
kind: PersistentVolume
metadata:name: deploy-mysql-nfs-pv # pv的名字namespace: deploy-test # 这里为命名空间的名字
spec:capacity:storage: 1Gi # 申请的硬盘大小为1GB，可修改accessModes:- ReadWriteMany # 权限为多节点读写nfs:# 注意修改nfs服务器地址server: 192.168.1.160# 注意修改目录的地址path: /data/nfs/mysqlstorageClassName: "nfs" # 存储类型选择nfs

pvc的yaml文件

apiVersion: v1
kind: PersistentVolumeClaim
metadata:name: deploy-mysql-nfs-pvc # 为pvc取一个好听的名字namespace: deploy-test # 命名空间名字
spec:accessModes:- ReadWriteMany # 权限为多节点读写storageClassName: "nfs" # 存储类型为nfsresources:requests:storage: 1Gi # 申请大小容量为1GBvolumeName: deploy-mysql-nfs-pv # 绑定的pv名字

执行后我们可以查看创建的状态：

部署mysql

创建mysql的root密码的secret

前面准备工作都做好了，接下来我们就可以开始部署mysql了，但是之前我们还需要创建一个secret，执行命令获取yaml文件内容：

# 命令说明
kubectl create secret generic mysql-password --from-literal=mysql_root_password=mysql的root密码 -n 命名空间 --dry-run=client -o=yaml# 命令示例
kubectl create secret generic mysql-password --from-literal=mysql_root_password=root -n deploy-test --dry-run=client -o=yaml

生成如图所示：

创建mysql部署的yaml

apiVersion: v1
kind: Service
metadata:name: deploy-mysql-svc # mysql暴露服务的名字namespace: deploy-test # 命名空间labels:app: mysql
spec:ports:- port: 3306 # 暴露给外部3306端口name: mysqltargetPort: 3306 # 内部目标3306端口nodePort: 30306 # 外部访问集群nodeport的30306端口selector:app: mysqltype: NodePortsessionAffinity: ClientIP---apiVersion: apps/v1
kind: StatefulSet # 创建一个StatefulSet有状态的控制器
metadata:name: deploy-mysql # 部署的名字namespace: deploy-test # 命名空间
spec:selector:matchLabels:app: mysqlserviceName: "deploy-mysql-svc" # 注意指定上面的那个服务名称replicas: 1template:metadata:labels:app: mysqlspec:terminationGracePeriodSeconds: 10containers:- args: # 新增一些启动参数- --character-set-server=utf8mb4- --collation-server=utf8mb4_unicode_ci- --lower_case_table_names=1- --default-time_zone=+8:00name: mysql# image: docker.io/library/mysql:5.7.43image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:5.7.43 # 因为dockerhub上镜像经常拉取失败，所以使用此镜像ports:- containerPort: 3306 # 容器内部暴露3306端口name: mysqlvolumeMounts:- name: mysql-data # 引用pvc挂载的名字mountPath: /var/lib/mysql # 这个是容器内部存放数据的文件夹目录，需要挂在到pvc当中env:- name: MYSQL_ROOT_PASSWORDvalueFrom: # mysql的密码引用上面创建的secretsecretKeyRef:key: mysql_root_passwordname: mysql-passwordvolumes:- name: mysql-data # pvc的挂载名称persistentVolumeClaim:claimName: deploy-mysql-nfs-pvc # 指定使用那个pvc

部署mysql

整体的yaml文件内容为：

apiVersion: v1
kind: Namespace
metadata:name: deploy-test
spec: {}
status: {}---apiVersion: v1
kind: PersistentVolume
metadata:name: deploy-mysql-nfs-pvnamespace: deploy-test
spec:capacity:storage: 1GiaccessModes:- ReadWriteManynfs:server: 192.168.1.160path: /data/nfs/mysqlstorageClassName: "nfs"---apiVersion: v1
kind: PersistentVolumeClaim
metadata:name: deploy-mysql-nfs-pvcnamespace: deploy-test
spec:accessModes:- ReadWriteManystorageClassName: "nfs"resources:requests:storage: 1GivolumeName: deploy-mysql-nfs-pv---apiVersion: v1
data:mysql_root_password: cm9vdA==
kind: Secret
metadata:name: mysql-passwordnamespace: deploy-test---apiVersion: v1
kind: Service
metadata:name: deploy-mysql-svcnamespace: deploy-testlabels:app: mysql
spec:ports:- port: 3306name: mysqltargetPort: 3306nodePort: 30306selector:app: mysqltype: NodePortsessionAffinity: ClientIP---apiVersion: apps/v1
kind: StatefulSet
metadata:name: deploy-mysqlnamespace: deploy-test
spec:selector:matchLabels:app: mysqlserviceName: "deploy-mysql-svc"replicas: 1template:metadata:labels:app: mysqlspec:terminationGracePeriodSeconds: 10containers:- args:- --character-set-server=utf8mb4- --collation-server=utf8mb4_unicode_ci- --lower_case_table_names=1- --default-time_zone=+8:00name: mysql# image: docker.io/library/mysql:5.7.43image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:5.7.43ports:- containerPort: 3306name: mysqlvolumeMounts:- name: mysql-datamountPath: /var/lib/mysqlenv:- name: MYSQL_ROOT_PASSWORDvalueFrom:secretKeyRef:key: mysql_root_passwordname: mysql-passwordvolumes:- name: mysql-datapersistentVolumeClaim:claimName: deploy-mysql-nfs-pvc

执行以下命令部署：

kubectl apply -f deploy-mysql.yaml

创建结果：

执行下面这行命令监控部署：

watch kubectl get all -o wide -n deploy-test

看到下面这个代表创建成功：

当我们查看nfs当中挂在出来的mysql目录的时候：

ll /data/nfs/mysql/

文件夹内容：

链接mysql

外部链接

在我们创建mysql的时候我们就规定了一个NodePort端口，如图：

我们直接使用集群当中任意一个节点的30306端口即可链接这个数据库：

mysql -uroot -h192.168.1.160 -p -P30306

查看结果：

内部链接

在集群里面访问我们可以通过主机名，主机名格式如下：

<pod名称>.<service名称>.<命名空间名称>.svc.cluster.local

执行命令查看：

kubectl get all -o wide -n deploy-test

各类名称如图所示：

所以我们此次访问mysql的主机名如下：

deploy-mysql-0.deploy-mysql-svc.deploy-test.svc.cluster.local

我们此次就不建立其他的pod来验证是否能够安装上了，我们直接检查集群内的dns解析是否正常就知道这个域名是否正常了，使用以下命令查看k8s集群当中的dns服务的地址：

kubectl get svc -o wide -n kube-system | grep dns

查看dns服务地址：

直接通过 nslookup 尝试解析查看是否解析到正确的IP地址上：

# 安装nslookup命令所在的软件包
yum install -y bind-utils
# 解析域名
nslookup deploy-mysql-0.deploy-mysql-svc.deploy-test.svc.cluster.local 10.96.0.10

发现域名解析是正常的：

好了，k8s上部署mysql完成了，下课