0


Kubernetes(k8s)上搭建一主两从的mysql8集群

Kubernetes上搭建一主两从的mysql8集群

环境准备

本文章视频教程地址:https://www.bilibili.com/video/BV1iw411e7ZE/

首先你需要准备一个kubernetes集群和一台nfs服务器,为了方便,我就用 k8s-master 来做nfs服务器了。我的服务器IP地址和用途如图:
IP地址主机名用途192.168.1.160k8s-masterKubernetes主服务器兼nfs服务器192.168.1.161K8s-node01Kubernetes的第一个工作节点192.168.1.162K8s-node02Kubernetes的第二个工作节点
Kubernetes集群已经准备好如图:
在这里插入图片描述

如果你还没有Kubernetes集群,请参考我写的文章:https://blog.csdn.net/m0_51510236/article/details/130842122

我之前写过关于在物理机上搭建MySQL主从和在Kubernetes上安装单节点的文章,可以对这篇文章进行参考:

搭建nfs服务器

安装NFS

我打算在主服务器上安装nfs,因为需要在两个工作节点上连接nfs,所以工作节点上也要安装nfs:

  1. yum install-y nfs-utils

三台服务器都要安装,如图:
在这里插入图片描述

暴露nfs目录

因为我们要安装三台mysql(一主两从),所以我们要创建三个目录用于这三台服务器。

我之前写过一篇关于动态存储的文章,如果需要使用动态存储请参考:https://blog.csdn.net/m0_51510236/article/details/132641343,动态存储的安装步骤是这篇文章的上半部分

我们直接在nfs服务器(k8s-master)当中创建这三个目录并写入

  1. /etc/exports

文件夹中(创建的目录可以修改):

  1. mkdir-p /data/nfs/{mysql-master,mysql-slaver-01,mysql-slaver-02}cat>> /etc/exports <<EOF
  2. /data/nfs/mysql-master *(rw,sync,no_root_squash)
  3. /data/nfs/mysql-slaver-01 *(rw,sync,no_root_squash)
  4. /data/nfs/mysql-slaver-02 *(rw,sync,no_root_squash)
  5. EOF

创建后如图:
在这里插入图片描述

开启nfs服务器

之前我们已经搭建好了NFS服务器,接下来我们可以直接在主服务器上启动nfs服务器。这行这行命令:

  1. systemctl enable--now nfs-server

执行后我们可以通过这行命令来检查目录是否暴露成功:

  1. # 注意修改为自己的nfs服务器地址
  2. showmount -e192.168.1.160

可以查看三台服务器都能检查到已经暴露的三个目录:
在这里插入图片描述

安装MySQL集群

创建命名空间

创建一个命名空间来部署MySQL集群,当然你也可以使用默认的Default命名空间。这里就用

  1. deploy-test

命名空间来搭建集群了,首先我们将这个命名空间创建出来:

  • 命令创建
  1. kubectl create namespace deploy-test
  • yaml资源清单文件创建(推荐)
  1. apiVersion: v1
  2. kind: Namespace
  3. metadata:name: deploy-test
  4. spec:{}status:{}

创建后如图:
在这里插入图片描述

创建MySQL密码的Secret

创建一个存储了MySQL密码的Secret,我们可以直接使用这行命令生成这个Secret的资源清单文件:

  1. # 注意修改root的密码和命名空间,我的root密码设置为的是root
  2. kubectl create secret generic mysql-password --namespace=deploy-test --from-literal=mysql_root_password=root --dry-run=client -o=yaml

执行后如图:
在这里插入图片描述

将它存入一个yaml文件当中并执行:
在这里插入图片描述

安装MySQL主节点

创建pv和pvc

我们之前安装了nfs,现在我们可以给予那些目录创建pv和pvc,创建pv和pvc的资源清单文件(pv和pvc在我之前的一篇文章中有比较详细介绍:https://blog.csdn.net/m0_51510236/article/details/132482351):

  1. apiVersion: v1
  2. kind: PersistentVolume
  3. metadata:name: deploy-mysql-master-nfs-pv
  4. namespace: deploy-test
  5. spec:capacity:storage: 1Gi
  6. accessModes:- ReadWriteMany
  7. nfs:# 注意修改IP地址和暴露的目录(如果不一样)server: 192.168.1.160
  8. path: /data/nfs/mysql-master
  9. storageClassName:"nfs"---apiVersion: v1
  10. kind: PersistentVolumeClaim
  11. metadata:name: deploy-mysql-master-nfs-pvc
  12. namespace: deploy-test
  13. spec:accessModes:- ReadWriteMany
  14. storageClassName:"nfs"resources:requests:storage: 1Gi
  15. volumeName: deploy-mysql-master-nfs-pv

创建后我们可以用这行命令来查看创建后的pv和pvc:

  1. kubectl get pv,pvc -n deploy-test

创建成功如图:
在这里插入图片描述

主节点的配置文件

我们需要为主节点准备一个

  1. my.cnf

配置文件,文件内容如下:

  1. [mysqld]
  2. skip-host-cache
  3. skip-name-resolve
  4. datadir = /var/lib/mysql
  5. socket = /var/run/mysqld/mysqld.sock
  6. secure-file-priv = /var/lib/mysql-files
  7. pid-file = /var/run/mysqld/mysqld.pid
  8. user = mysql
  9. secure-file-priv = NULL
  10. server-id = 1
  11. log-bin = master-bin
  12. log_bin_index = master-bin.index
  13. binlog_do_db = xiaohh_user
  14. binlog_ignore_db = information_schema
  15. binlog_ignore_db = mysql
  16. binlog_ignore_db = performance_schema
  17. binlog_ignore_db = sys
  18. binlog-format = ROW
  19. [client]
  20. socket = /var/run/mysqld/mysqld.sock
  21. !includedir /etc/mysql/conf.d/

有那么几个配置需要注意一下那么几个配置:

  1. # server id,要注意多个mysql节点唯一
  2. server-id =1# 生成的logbin的文件名
  3. log-bin = master-bin
  4. log_bin_index = master-bin.index
  5. # 同步哪个数据库,这里我们为了测试之同步xiaohh_user这个数据库
  6. binlog_do_db = xiaohh_user
  7. # 排除哪个数据库,可以写多行,排除的数据库不会被主从同步,这里写上mysql自带的几个数据库
  8. binlog_ignore_db = information_schema
  9. ... # 还有几行省略# binlog的格式
  10. binlog-format = ROW

接下来将创建一个ConfigMap来存储这个配置文件。可以使用以下配置生成yaml资源清单文件内容:

  1. kubectl create configmap mysql-master-cm -n deploy-test --from-file=my.cnf --dry-run=client -o yaml

生成如图:
在这里插入图片描述

我们将在下一个步骤将其创建。

部署mysql主节点

我们直接上mysql主节点的yaml资源清单文件:

  1. apiVersion: v1
  2. data:my.cnf:|
  3. [mysqld]
  4. skip-host-cache
  5. skip-name-resolve
  6. datadir = /var/lib/mysql
  7. socket = /var/run/mysqld/mysqld.sock
  8. secure-file-priv = /var/lib/mysql-files
  9. pid-file = /var/run/mysqld/mysqld.pid
  10. user = mysql
  11. secure-file-priv = NULL
  12. server-id = 1
  13. log-bin = master-bin
  14. log_bin_index = master-bin.index
  15. binlog_do_db = xiaohh_user
  16. binlog_ignore_db = information_schema
  17. binlog_ignore_db = mysql
  18. binlog_ignore_db = performance_schema
  19. binlog_ignore_db = sys
  20. binlog-format = ROW[client]
  21. socket = /var/run/mysqld/mysqld.sock
  22. !includedir /etc/mysql/conf.d/
  23. kind: ConfigMap
  24. metadata:name: mysql-master-cm
  25. namespace: deploy-test
  26. ---apiVersion: v1
  27. kind: Service
  28. metadata:name: deploy-mysql-master-svc
  29. namespace: deploy-test
  30. labels:app: mysql-master
  31. spec:ports:-port:3306name: mysql
  32. targetPort:3306nodePort:30306selector:app: mysql-master
  33. type: NodePort
  34. sessionAffinity: ClientIP
  35. ---apiVersion: apps/v1
  36. kind: StatefulSet
  37. metadata:name: deploy-mysql-master
  38. namespace: deploy-test
  39. spec:selector:matchLabels:app: mysql-master
  40. serviceName:"deploy-mysql-master-svc"replicas:1template:metadata:labels:app: mysql-master
  41. spec:terminationGracePeriodSeconds:10containers:-args:---character-set-server=utf8mb4
  42. ---collation-server=utf8mb4_unicode_ci
  43. ---lower_case_table_names=1
  44. ---default-time_zone=+8:00name: mysql
  45. # image: docker.io/library/mysql:8.0.34image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:8.0.34
  46. ports:-containerPort:3306name: mysql
  47. volumeMounts:-name: mysql-data
  48. mountPath: /var/lib/mysql
  49. -name: mysql-conf
  50. mountPath: /etc/my.cnf
  51. readOnly:truesubPath: my.cnf
  52. env:-name: MYSQL_ROOT_PASSWORD
  53. valueFrom:secretKeyRef:key: mysql_root_password
  54. name: mysql-password
  55. volumes:-name: mysql-data
  56. persistentVolumeClaim:claimName: deploy-mysql-master-nfs-pvc
  57. -name: mysql-conf
  58. configMap:name: mysql-master-cm
  59. items:-key: my.cnf
  60. mode:0644path: my.cnf

我之前讲过stateful的mysql资源清单文件内容,可以参考我写的文章:https://blog.csdn.net/m0_51510236/article/details/132482351,这里就不再过多讲解。有几个特殊的地方需要拿出来说一下,首先就是这个位置:
在这里插入图片描述

为了方便有些拉取不到dockerhub镜像的小伙伴,我将dockerhub的mysql镜像拉取下来并推送到了国内的阿里云。你们可以选择性使用。接下来还需要注意文件的挂载:
在这里插入图片描述

然后执行以下命令部署这个yaml文件:

  1. kubectl apply -f mysql-master.yaml

如图可以看到mysql已经运行起来了:
在这里插入图片描述

接下来查看一下nfs挂在出来的目录,可以看到log-bin文件已经出现了:
在这里插入图片描述

安装第一个MySQL Slave节点

刚刚我们安装了MySQL的主节点,接下来我们安装第一个MySQL从节点。

创建pv和pvc

因为搭建主节点的时候已经说过了,这里直接提供yaml资源清单文件:

  1. apiVersion: v1
  2. kind: PersistentVolume
  3. metadata:name: deploy-mysql-slave-01-nfs-pv
  4. namespace: deploy-test
  5. spec:capacity:storage: 1Gi
  6. accessModes:- ReadWriteMany
  7. nfs:server: 192.168.1.160
  8. path: /data/nfs/mysql-slaver-01storageClassName:"nfs"---apiVersion: v1
  9. kind: PersistentVolumeClaim
  10. metadata:name: deploy-mysql-slave-01-nfs-pvc
  11. namespace: deploy-test
  12. spec:accessModes:- ReadWriteMany
  13. storageClassName:"nfs"resources:requests:storage: 1Gi
  14. volumeName: deploy-mysql-slave-01-nfs-pv

我们直接创建:
在这里插入图片描述

第一个从节点配置文件

我们需要为主节点准备一个

  1. my.cnf

配置文件,文件内容如下:

  1. [mysqld]
  2. skip-host-cache
  3. skip-name-resolve
  4. datadir = /var/lib/mysql
  5. socket = /var/run/mysqld/mysqld.sock
  6. secure-file-priv = /var/lib/mysql-files
  7. pid-file = /var/run/mysqld/mysqld.pid
  8. user = mysql
  9. secure-file-priv = NULL
  10. server-id = 2
  11. log-bin = slave-bin
  12. relay-log = slave-relay-bin
  13. relay-log-index = slave-relay-bin.index
  14. [client]
  15. socket = /var/run/mysqld/mysqld.sock
  16. !includedir /etc/mysql/conf.d/

有那么几个配置需要注意一下那么几个配置:

  1. # server id,注意不同节点要不一样
  2. server-id =2# 从节点的logbin文件
  3. log-bin = slave-bin
  4. relay-log = slave-relay-bin
  5. relay-log-index = slave-relay-bin.index

接下来将创建一个ConfigMap来存储这个配置文件。可以使用以下配置生成yaml资源清单文件内容:

  1. kubectl create configmap mysql-slave-01-cm -n deploy-test --from-file=my.cnf --dry-run=client -o yaml

生成如图:
在这里插入图片描述

我们将在下一个步骤将其创建。

部署mysql从节点

yaml资源清单文件和主节点差不多,这里就直接提供:

  1. apiVersion: v1
  2. data:my.cnf:|
  3. [mysqld]
  4. skip-host-cache
  5. skip-name-resolve
  6. datadir = /var/lib/mysql
  7. socket = /var/run/mysqld/mysqld.sock
  8. secure-file-priv = /var/lib/mysql-files
  9. pid-file = /var/run/mysqld/mysqld.pid
  10. user = mysql
  11. secure-file-priv = NULL
  12. server-id = 2
  13. log-bin = slave-bin
  14. relay-log = slave-relay-bin
  15. relay-log-index = slave-relay-bin.index[client]
  16. socket = /var/run/mysqld/mysqld.sock
  17. !includedir /etc/mysql/conf.d/
  18. kind: ConfigMap
  19. metadata:name: mysql-slave-01-cm
  20. namespace: deploy-test
  21. ---apiVersion: v1
  22. kind: Service
  23. metadata:name: deploy-mysql-slave-svc
  24. namespace: deploy-test
  25. labels:app: mysql-slave
  26. spec:ports:-port:3306name: mysql
  27. targetPort:3306nodePort:30308selector:app: mysql-slave
  28. type: NodePort
  29. sessionAffinity: ClientIP
  30. ---apiVersion: apps/v1
  31. kind: StatefulSet
  32. metadata:name: deploy-mysql-slave-01namespace: deploy-test
  33. spec:selector:matchLabels:app: mysql-slave
  34. serviceName:"deploy-mysql-slave-svc"replicas:1template:metadata:labels:app: mysql-slave
  35. spec:terminationGracePeriodSeconds:10containers:-args:---character-set-server=utf8mb4
  36. ---collation-server=utf8mb4_unicode_ci
  37. ---lower_case_table_names=1
  38. ---default-time_zone=+8:00name: mysql
  39. # image: docker.io/library/mysql:8.0.34image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:8.0.34
  40. ports:-containerPort:3306name: mysql
  41. volumeMounts:-name: mysql-data
  42. mountPath: /var/lib/mysql
  43. -name: mysql-conf
  44. mountPath: /etc/my.cnf
  45. readOnly:truesubPath: my.cnf
  46. env:-name: MYSQL_ROOT_PASSWORD
  47. valueFrom:secretKeyRef:key: mysql_root_password
  48. name: mysql-password
  49. volumes:-name: mysql-data
  50. persistentVolumeClaim:claimName: deploy-mysql-slave-01-nfs-pvc
  51. -name: mysql-conf
  52. configMap:name: mysql-slave-01-cm
  53. items:-key: my.cnf
  54. mode:0644path: my.cnf

我们直接创建:
在这里插入图片描述

安装第二个MySQL Slave节点

创建pv和pvc

这里同样只提供相应的yaml资源清单文件:

  1. apiVersion: v1
  2. kind: PersistentVolume
  3. metadata:name: deploy-mysql-slave-02-nfs-pv
  4. namespace: deploy-test
  5. spec:capacity:storage: 1Gi
  6. accessModes:- ReadWriteMany
  7. nfs:server: 192.168.1.160
  8. path: /data/nfs/mysql-slaver-02storageClassName:"nfs"---apiVersion: v1
  9. kind: PersistentVolumeClaim
  10. metadata:name: deploy-mysql-slave-02-nfs-pvc
  11. namespace: deploy-test
  12. spec:accessModes:- ReadWriteMany
  13. storageClassName:"nfs"resources:requests:storage: 1Gi
  14. volumeName: deploy-mysql-slave-02-nfs-pv

我们直接创建,可以看到第三个pv和pvc都被创建出来了:
在这里插入图片描述

第二个从节点配置文件

我们需要为主节点准备一个

  1. my.cnf

配置文件,文件内容如下:

  1. [mysqld]
  2. skip-host-cache
  3. skip-name-resolve
  4. datadir = /var/lib/mysql
  5. socket = /var/run/mysqld/mysqld.sock
  6. secure-file-priv = /var/lib/mysql-files
  7. pid-file = /var/run/mysqld/mysqld.pid
  8. user = mysql
  9. secure-file-priv = NULL
  10. server-id = 3
  11. log-bin = slave-bin
  12. relay-log = slave-relay-bin
  13. relay-log-index = slave-relay-bin.index
  14. [client]
  15. socket = /var/run/mysqld/mysqld.sock
  16. !includedir /etc/mysql/conf.d/

有那么几个配置需要注意一下那么几个配置:

  1. # server id,注意不同节点要不一样
  2. server-id =3# 从节点的logbin文件
  3. log-bin = slave-bin
  4. relay-log = slave-relay-bin
  5. relay-log-index = slave-relay-bin.index

接下来将创建一个ConfigMap来存储这个配置文件。可以使用以下配置生成yaml资源清单文件内容:

  1. kubectl create configmap mysql-slave-02-cm -n deploy-test --from-file=my.cnf --dry-run=client -o yaml

生成如图:
在这里插入图片描述

我们将在下一个步骤将其创建。

部署mysql第二个从节点

注意这个配置文件少了一个service,因为我打算将它与slave1共用一个service,yaml资源清单文件:

  1. apiVersion: v1
  2. data:my.cnf:|
  3. [mysqld]
  4. skip-host-cache
  5. skip-name-resolve
  6. datadir = /var/lib/mysql
  7. socket = /var/run/mysqld/mysqld.sock
  8. secure-file-priv = /var/lib/mysql-files
  9. pid-file = /var/run/mysqld/mysqld.pid
  10. user = mysql
  11. secure-file-priv = NULL
  12. server-id = 3
  13. log-bin = slave-bin
  14. relay-log = slave-relay-bin
  15. relay-log-index = slave-relay-bin.index[client]
  16. socket = /var/run/mysqld/mysqld.sock
  17. !includedir /etc/mysql/conf.d/
  18. kind: ConfigMap
  19. metadata:name: mysql-slave-02-cm
  20. namespace: deploy-test
  21. ---apiVersion: apps/v1
  22. kind: StatefulSet
  23. metadata:name: deploy-mysql-slave-02namespace: deploy-test
  24. spec:selector:matchLabels:app: mysql-slave-02serviceName:"deploy-mysql-slave-svc"replicas:1template:metadata:labels:app: mysql-slave-02spec:terminationGracePeriodSeconds:10containers:-args:---character-set-server=utf8mb4
  25. ---collation-server=utf8mb4_unicode_ci
  26. ---lower_case_table_names=1
  27. ---default-time_zone=+8:00name: mysql
  28. # image: docker.io/library/mysql:8.0.34image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:8.0.34
  29. ports:-containerPort:3306name: mysql
  30. volumeMounts:-name: mysql-data
  31. mountPath: /var/lib/mysql
  32. -name: mysql-conf
  33. mountPath: /etc/my.cnf
  34. readOnly:truesubPath: my.cnf
  35. env:-name: MYSQL_ROOT_PASSWORD
  36. valueFrom:secretKeyRef:key: mysql_root_password
  37. name: mysql-password
  38. volumes:-name: mysql-data
  39. persistentVolumeClaim:claimName: deploy-mysql-slave-02-nfs-pvc
  40. -name: mysql-conf
  41. configMap:name: mysql-slave-02-cm
  42. items:-key: my.cnf
  43. mode:0644path: my.cnf

我们直接创建:
在这里插入图片描述

使三台服务器组成一个集群

查看主节点的状态

首先我们来到master的mysql,输入下面命令:

  1. kubectl exec-itn deploy-test pod/deploy-mysql-master-0 -- mysql -uroot-p

输入密码之后可以进入mysql内部:
在这里插入图片描述

我们输入这行命令查看master的状态:

  1. show master status;

查看输出结果,我们需要记住

  1. File

  1. Position

参数:
在这里插入图片描述

接下来我们分别来到两个子几点当中执行这行命令:

  1. change master to master_host='deploy-mysql-master-0.deploy-mysql-master-svc.deploy-test.svc.cluster.local', master_port=3306, master_user='root', master_password='root', master_log_file='master-bin.000003', master_log_pos=157, master_connect_retry=30, get_master_public_key=1;

需要注意下面的几个参数:

  • master_host: 这个参数是master的地址,kubernetes提供的解析规则是 pod名称.service名称.命名空间.svc.cluster.local ,所以我们master的mysql地址是 deploy-mysql-master-0.deploy-mysql-master-svc.deploy-test.svc.cluster.local
  • master_port: 主节点的mysql端口,我们没改默认是3306
  • master_user: 登录到主节点的mysql用户
  • master_password: 登录到主节点要用到的密码
  • master_log_file: 我们之前查看mysql主节点状态时候的 File 字段
  • master_log_pos: 我们之前查看mysql主节点状态时候的 Position 字段
  • master_connect_retry: 主节点重连时间
  • get_master_public_key: 连接主mysql的公钥获取方式

根据上面参数,如果要修改那么请按照自己的环境进行修改。

连接第一个Slave

我们使用下面这行命令就可以进入第一个mysql从节点:

  1. kubectl exec-itn deploy-test pod/deploy-mysql-slave-01-0 -- mysql -uroot-p

执行后如图:
在这里插入图片描述

我们先执行上面所提到的命令:
在这里插入图片描述

然后我们还要开启slave,执行下面命令:

  1. start slave;

执行后如图:
在这里插入图片描述

然后我们可以执行这行命令查看slave状态:

  1. show slave status\G

可以看到Slave的状态是正常的:
在这里插入图片描述

第一个slave节点加入成功

连接第二个Slave

我们使用下面这行命令就可以进入第二个mysql从节点:

  1. kubectl exec-itn deploy-test pod/deploy-mysql-slave-02-0 -- mysql -uroot-p

执行后如图:
在这里插入图片描述

我们执行同样的命令如图:
在这里插入图片描述

查看Slave状态:

  1. show slave status\G

可以看到第二个Slave也是正常的:
在这里插入图片描述

测试主从集群

首先我们在主节点当中创建一个数据库和一个数据表:

  1. CREATEDATABASE`xiaohh_user`;USE`xiaohh_user`;CREATETABLE`user`(`user_id`BIGINTUNSIGNEDPRIMARYKEYAUTO_INCREMENTCOMMENT'用户id',`username`VARCHAR(50)NOTNULLCOMMENT'用户名',`age`TINYINTUNSIGNEDDEFAULT18COMMENT'年龄',`gender`TINYINTUNSIGNEDDEFAULT2COMMENT'性别;0=男,1=女,2=未知')COMMENT'用户表';

创建如图:
在这里插入图片描述

在主节点上查看数据库:
在这里插入图片描述

然后我们来到从节点继续查看:
在这里插入图片描述

我们来到主数据库创建一条数据:

  1. INSERTINTO`user`(`username`,`age`,`gender`)VALUES('XiaoHH','18','0');

插入后如图:
在这里插入图片描述

可以看到两个从数据库数据也同步成功:
在这里插入图片描述

好了,Kubernetes上搭建MySQL主从就已经完毕了。祝你们编码愉快~


本文转载自: https://blog.csdn.net/m0_51510236/article/details/133145221
版权归原作者 XiaoHH Superme 所有, 如有侵权,请联系我们删除。

“Kubernetes(k8s)上搭建一主两从的mysql8集群”的评论:

还没有评论