MySQL8.0 innodb Cluster 高可用集群部署(MySQL、MySQL Shell、MySQL Router安装)
简介
MySQL InnoDB集群(Cluster)提供了一个集成的,本地的,HA解决方案。Mysq Innodb Cluster是利用组复制的 pxos 协议,保障数据一致性,组复制支持单主模式和多主模式。
InnoDB Cluster组件:
MySQL Group Replication,简称MGR,是MySQL的主从同步高可用方案,包括数据同步及角色选举
Mysql Shell 是InnoDB Cluster的管理工具,用来创建和管理集群
Mysql Router 是业务流量入口,支持对MGR的主从角色判断,可以配置不同的端口分别对外提供读写服务,和单端口读写分离。
innoDB Cluster将三个MySQL数据库实例构成一个高可用集群。其中一个实例是具有读/写能力的主要成员,其他两个实例是具有只读能力的次要成员。组复制将数据从主要成员复制到次要成员。MySQL Router将客户端应用程序连接到集群的主要成员。
为什么选择InnoDB Cluster:
InnoDB **集群(Cluster)**是InnoDB 副本集(ReplicaSet) 与 组复制(Group Replication) 的合成版,是InnoDB 副本集(ReplicaSet) 的高可用版,是 组复制(Group Replication) 的简易、自动化故障转移、可编程的增强版。
InnoDB **集群(Cluster)**提供了一个集成的,本地的,HA解决方案。Mysq Innodb Cluster是利用组复制的 pxos 协议,保障数据一致性,组复制模式(支持单主模式和多主)。
一、基础环境配置
1.1 部署规划:
IP
主机名
角色
安装软件
172.31.0.115
Mysql01
primary
mysql-shell,mysql8.3.0
172.31.0.116
Mysql02
secondary
mysql-shell,mysql8.3.0,mysqlroute
172.31.0.117
Mysql03
secondary
mysql-shell,mysql8.3.0,mysqlroute
1.2 部署资源:
下载地址:https://www.mysql.com/downloads
mysql-8.3.0-linux-glibc2.17-x86_64.tar.xz
mysql-router-8.3.0-linux-glibc2.17-x86_64.tar.xz
mysql-shell-8.3.0-linux-glibc2.17-x86-64bit.tar.gz
1.3 设置主机名:
每个节点都要设置
#配置主机名
vi /etc/hosts
#写入主机名信息
172.31.0.115 mysql01
172.31.0.116 mysql02
172.31.0.117 mysql03
#也可通过命令设置主机名:
sudo hostnamectl set-hostname mysql01
sudo hostnamectl set-hostname mysql02
sudo hostnamectl set-hostname mysql03
系统相关优化(自选):
cat>>/etc/sysctl.conf <<EOF
fs.aio-max-nr = 1048576
fs.file-max = 681574400
kernel.shmmax = 137438953472
kernel.shmmni = 4096
kernel.sem = 250 32000 100 200
net.ipv4.ip_local_port_range = 9000 65000
net.core.rmem_default = 262144
net.core.rmem_max = 4194304
net.core.wmem_default = 262144
net.core.wmem_max = 1048586
EOF
#执行生效
sysctl -p
cat>>/etc/security/limits.conf <<EOF
mysql soft nproc 65536
mysql hard nproc 65536
mysql soft nofile 65536
mysql hard nofile 65536
EOF
cat>>/etc/pam.d/login <<EOF
session required /lib/security/pam_limits.so
session required pam_limits.so
EOF
cat>>/etc/profile<<EOF
if [ $USER = “mysql” ]; then
ulimit -u 16384 -n 65536
fi
EOF
检查防火墙:
# 关闭
systemctl stop firewalld
# 开机禁用
systemctl disable firewalld
1.4 设置SSH免登录:
用ssh-keygen生成公钥,用ssh-copy-id将本地公钥复制到远程主机的authorized_keys文件。每台机器都要执行,注意执行时修改远程机器ip。
cd ~
ssh-keygen -t rsa
#一路回车
ssh-copy-id -i ~/.ssh/id_rsa.pub 172.31.0.117
ssh-copy-id -i ~/.ssh/id_rsa.pub 172.31.0.116
测试免登陆在mysql1上ssh mysql02
[root@mysql01 ~]# ssh mysql02
二、MySQL安装
2.1 查看系统是否自带mariadb并卸载(防止mysql与mariadb的文件发生冲突)
rpm -qa | grep mariadb
rpm -e mariadb-libs-X(更换查出来的信息) --nodeps
上传到 /usr/local/ 路径下,解压
cd /usr/local
ls
tar -xvf mysql-8.3.0-linux-glibc2.17-x86_64.tar.xz
2.2 删除压缩包,并将解压的mysql文件夹重命名为mysql
rm -rf mysql-8.3.0-linux-glibc2.17-x86_64.tar.xz
mv mysql-8.3.0-linux-glibc2.17-x86_64/ ./mysql
2.3 进入mysql目录,创建data文件夹
cd mysql
mkdir data
2.4 创建mysql用户和组并修改权限
groupadd mysql
useradd -g mysql mysql
chown -R mysql.mysql /usr/local/mysql
2.5 创建编辑my.cnf配置文件
vim /etc/my.cnf
[client]
port = 3306
#根据实际情况调整mysql.sock配置
socket = /tmp/mysql.sock
[mysqld]
#Mysql服务的唯一编号 每个mysql服务Id需唯一
server-id = 1
report_host = mysql01
#服务端口号 默认3306
port = 3306
#mysql安装根目录
basedir = /usr/local/mysql
#mysql数据文件所在位置
datadir = /usr/local/mysql/data
#pid
pid-file = /usr/local/mysql/mysql.pid
#设置socke文件所在目录
socket = /tmp/mysql.sock
#设置临时目录
tmpdir = /tmp
# 用户
user = mysql
# 允许访问的IP网段
bind-address = 0.0.0.0
#错误日志
log_error=/usr/local/mysql/data/mysql-error.log
#设置认证插件(mysql8以上默认为caching_sha2_password 如果使用mysql_native_password则在后续配置mysql router的时候会有问题,我在这里搞错了后面配mysql router的时候有问题掉过头来把mysql重装了)
#default_authentication_plugin=mysql_native_password
#设置sqlmode(根据需求自定义)
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
# 跳过密码登录
#skip-grant-tables
#主要用于MyISAM存储引擎,如果多台服务器连接一个数据库则建议注释下面内容
skip-external-locking
#只能用IP地址检查客户端的登录,不用主机名
skip_name_resolve = 1
#数据库默认字符集,主流字符集支持一些特殊表情符号(特殊表情符占用4个字节)
character-set-server = utf8mb4
#数据库字符集对应一些排序等规则,注意要和character-set-server对应
collation-server = utf8mb4_general_ci
#设置client连接mysql时的字符集,防止乱码
init_connect=‘SET NAMES utf8mb4’
#是否对sql语句大小写敏感,1表示不敏感
lower_case_table_names = 1
#最大连接数
max_connections = 15000
#最大错误连接数
max_connect_errors = 20000
#TIMESTAMP如果没有显示声明NOT NULL,允许NULL值
explicit_defaults_for_timestamp = true
#SQL数据包发送的大小,如果有BLOB对象建议修改成1G
max_allowed_packet = 128M
#MySQL连接闲置超过一定时间后(单位:秒)将会被强行关闭
#MySQL默认的wait_timeout 值为8个小时, interactive_timeout参数需要同时配置才能生效
interactive_timeout = 30
wait_timeout = 30
#内部内存临时表的最大值 ,设置成128M。
#比如大数据量的group by ,order by时可能用到临时表,
#超过了这个值将写入磁盘,系统IO压力增大
innodb_buffer_pool_size = 32G
table_open_cache = 4096
max_heap_table_size = 256M
sort_buffer_size = 32M
tmp_table_size = 256M
slow-query-log = 1
long_query_time = 4
max_allowed_packet = 32M
innodb_lock_wait_timeout = 120
open-files-limit = 30000
#mysql binlog日志文件保存的过期时间,过期后自动删除
#expire_logs_days = 5
#每个节点server_id要保障不一样
server_id = 4000000161
loose-group_replication_group_name=“a38e32fd-5fb6-11e8-ad7a-00259015d941”
#每个节点下面的配置信息不太一样,注意修改
loose-group_replication_local_address= “172.31.0.115:3306”
loose-group_replication_group_seeds= “172.31.0.115:3306,172.31.0.116:3306,172.31.0.117:3306”
loose-group_replication_single_primary_mode=TRUE
2.6 进入mysql文件夹的bin目录下,初始化mysql
cd /usr/local/mysql/bin
./mysqld --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data/ --initialize
2.7 添加mysql服务,设置开机自启
#查看是是否有MySQL服务
chkconfig --list
#将MySQL的服务脚本放到系统服务中,/etc/init.d是 /etc/rc.d/init.d的软链接
cp -a /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql
#授予可执行权限
chmod +x /etc/rc.d/init.d/mysql
#添加mysql服务
chkconfig --add mysql
#使MySQL开机自启
chkconfig --level 345 mysql on
2.8 创建mysql下bin目录的同步链接,设置后无需进入mysql的bin目录就可以执行mysql命令
ln -s /usr/local/mysql/bin/mysql /usr/bin
2.9 启动MySQL
#查看状态
service mysql status
#启动
service mysql start
#停止
service mysql stop
2.10 设置密码
MySQL成功启动后可以通过mysql下data目录下的日志文件可以找到root用户初始化密码,将密码复制粘贴,我们就可以成功登录mysql了
cat /usr/local/mysql/data/mysql-error.log
#修改root用户密码
#三台主机的root密码要一样
mysql -uroot -p
alter user 'root'@'localhost' identified by '你的密码';
use mysql;
#授权root用户任何IP访问
update user set host = '%' where user = 'root';
#刷新权限
FLUSH PRIVILEGES;
#查看用户信息是否被修改
select host, user, authentication_string, plugin from user;
到此mysql server 8 数据库的安装配置完成了!
2.11 给MySQL root用户授权(才能配置InnoDB集群实例)
grant all privileges on *.* to `root`@`%` with grant option;flush privileges;
2.12 组复制配置
修改各个节点/etc/my.cnf 配置MGR, 组复制信息,注意每台机器server_id,loose-group_replication_local_address需要不同
server_id = 4000000161
loose-group_replication_group_name=“a38e32fd-5fb6-11e8-ad7a-00259015d941”
loose-group_replication_local_address= “172.31.0.115:3306”
loose-group_replication_group_seeds= “172.31.0.115:3306,172.31.0.116:3306,172.31.0.117:3306”
loose-group_replication_single_primary_mode=TRUE
三、MySQL Shell安装
3.1将压缩包上传到每台机器/usr/local下,解压、授权并配置环境变量
#解压并配置
tar xvf mysql-shell-8.3.0-linux-glibc2.17-x86-64bit.tar.gz
#重命名
mv mysql-shell-8.3.0-linux-glibc2.17-x86-64bit mysql-shell
#授权给mysql用户–必须
chown -R mysql.mysql mysql-shell
#设置环境变量
vi /etc/profile
export PATH=/usr/local/mysql-shell/bin:$PATH
#:wq保存后使环境变量生效
source /etc/profile
3.2 节点配置检查
进入MySQL shell
mysqlsh
进去mysqlsh后进入js模式
js
在MySQL shell中执行,每台机器都要执行,注意修改主机名为当前节点
dba.configureInstance();
dba.checkInstanceConfiguration(‘root@mysql01:3306’);
3.3 创建并添加集群
在mysql shell中
var cluster = dba.createCluster(‘testCluster’);
cluster.addInstance(‘root@mysql02:3306’);
cluster.addInstance(‘root@mysql03:3306’);
3.4 查看集群状态
在MySQL shell 中
var cluster=dba.getCluster(‘testCluster’);
cluster.status();
四、安装MySQL Router
4.1 上传资源并配置环境
压缩包上传到/usr/local下,解压、授权并配置环境变量**。**
#解压并配置
tar xvf mysql-router-9.1.0-linux-glibc2.17-x86_64.tar.xz
mv mysql-router-9.1.0-linux-glibc2.17-x86_64 mysql-router
#授权 – 必须
chown -R mysql.mysql mysql-router
#设置环境变量
vi /etc/profile
export PATH=/usr/local/mysql-shell/bin:/usr/local/mysql-router/bin:$PATH
#:wq保存后使环境变量生效
source /etc/profile
4.2 初始化MySQL Router
mysql router主备节点都要执行
mysqlrouter --bootstrap root@localhost:3306 -d /usr/local/mysql-router/myrouter --user=root
注:这里会生成/usr/local/mysql-router/myrouter目录, 并在里面生成 mysqlrouter.conf 配置文件,接着可以根据实际修改端口等配置。
cat /usr/local/mysql-router/myrouter/mysqlrouter.conf
4.3 启动mysql router
cd /usr/local/mysql-router/myrouter
sh start.sh
集群及Router安装结束
五、MySQL集群维护
5.1 集群节点扩容
MySQL、MySQL Shell及MySQL Router 安装配置见上
#进去mysqlsh
mysqlsh
#切换到js模式
js
#获取集群
var cluster = dba.getCluster();
#查看集群状态
cluster.status();
#检查扩容机器是否符合加入,如果不符合根据提示修改配置。
dba.checkInstanceConfiguration(‘user@主机名:3306’);
#加入集群
cluster.addInstance(user@主机名:3306’);
5.2 集群节点删除
#进去mysqlsh
mysqlsh
#切换到js模式
js
#获取集群
var cluster = dba.getCluster();
#查看集群状态
cluster.status();
#要移除的节点主机名或IP
var memberToBeRemoved = “mysql03”;
#删除
cluster.removeMemberFromMetadata(memberToBeRemoved);
#移除后保存配置
cluster.saveConfiguration();
#查看集群状态
cluster.status()
相关文章:
MySQL8.0 innodb Cluster 高可用集群部署(MySQL、MySQL Shell、MySQL Router安装)
简介 MySQL InnoDB集群(Cluster)提供了一个集成的,本地的,HA解决方案。Mysq Innodb Cluster是利用组复制的 pxos 协议,保障数据一致性,组复制支持单主模式和多主模式。 InnoDB Cluster组件: …...
【时时三省】(C语言基础)简单的算法举例
山不在高,有仙则名。水不在深,有龙则灵。 ----CSDN 时时三省 判定2000—2500年中的每一年是否为闰年,并将结果输出。 本先分析闰年的条件: (1)能被4整除,但不能被100整除的年份都是闰年&…...
走进 Tcl 语言:历史、特性与应用
亲爱的小伙伴们😘,在求知的漫漫旅途中,若你对深度学习的奥秘、Java 与 Python 的奇妙世界,亦或是读研论文的撰写攻略有所探寻🧐,那不妨给我一个小小的关注吧🥰。我会精心筹备,在未来…...
Day42(补)【AI思考】-编译过程中语法分析及递归子程序分析法的系统性解析
文章目录 编译过程中语法分析及递归子程序分析法的系统性解析**一、总览:编译流程中的语法分析****1. 编译过程核心步骤** **二、语法分析的核心任务****1. 核心目标****2. 现实类比** **三、递归子程序分析法的本质****1. 方法分类****2. 递归子程序分析法的运作原…...
Effective Objective-C 2.0 读书笔记——内存管理(上)
Effective Objective-C 2.0 读书笔记——内存管理(上) 文章目录 Effective Objective-C 2.0 读书笔记——内存管理(上)引用计数属性存取方法中的内存管理autorelease保留环 ARCARC必须遵循的方法命名原则ARC 的自动优化࿱…...
软件测试覆盖率详解
🍅 点击文末小卡片 ,免费获取软件测试全套资料,资料在手,涨薪更快 一、覆盖率概念 覆盖率是用来度量测试完整性的一个手段,是测试技术有效性的一个度量。分为:白盒覆盖、灰盒覆盖和黑盒覆盖;测…...
控制玉米株高基因 PHR1 的基因克隆
https://zwxb.chinacrops.org/CN/10.3724/SP.J.1006.2024.33011...
windows10本地的JMeter+Influxdb+Grafana压测性能测试,【亲测,避坑】
一、环境,以下软件需要解压、安装到电脑上。 windows10 apache-jmeter-5.6.3 jdk-17.0.13 influxdb2-2.7.11 grafana-enterprise-11.5.1二、配置Influxdb,安装完默认连接http://localhost:8086/。打开连接,配置如下。 开启Influxdb…...
那些数据库函数那些事儿
stdio 1.基本概念 文件: 一组相关数据的集合 文件名: 01.sh //文件名 2.linux下的文件类型 b block 块设备文件 eg: 硬盘 c character 字符设备文件 eg: 鼠标,键盘 d directory 目录文件 eg: 文件夹 - regular 常…...
Excel中不用复杂公式根据指定X列的数值N复制整行数据N行简单方法
Excel中不用复杂公式根据指定X列的数值N复制整行数据N行简单方法 1、在“数据表”sheet1中对指定X列(假设X列的数字从X2开始到Xn结束)求和,和为Y。 2、在“数据表”sheet1数据列之外新建一列Z,Z1输入表头“匹配数据列”ÿ…...
如何在 Java 后端接口中提取请求头中的 Cookie 和 Token
个人名片 🎓作者简介:java领域优质创作者 🌐个人主页:码农阿豪 📞工作室:新空间代码工作室(提供各种软件服务) 💌个人邮箱:[2435024119qq.com] 📱个人微信&a…...
【Python网络爬虫】爬取网站图片实战
【Python网络爬虫】爬取网站图片实战 Scrapying Images on Website in Action By Jackson@ML *声明:本文简要介绍如何利用Python爬取网站数据图片,仅供学习交流。如涉及敏感图片或者违禁事项,请注意规避;笔者不承担相关责任。 1. 创建Python项目 1) 获取和安装最新版…...
SAP ABAP VA05增强
SE18 输入增强的BADI名称:BADI_SDOC_WRAPPER 进入后,点击Interface。 进入后,点击显示对象清单。 双击增强类,下面有之前做好的增强类,没有的可以自己创建一个。 IF_BADI_SDOC_WRAPPER~ADAPT_RESULT_COMP 代码 METHOD if_badi_sdoc_wrapper~adapt_result_comp."…...
八大排序——简单选择排序
目录 1.1基本操作: 1.2动态图: 1.3代码: 代码解释 1. main 方法 2. selectSort 方法 示例运行过程 初始数组 每轮排序后的数组 最终排序结果 代码总结 1.1基本操作: 选择排序(select sorting)也…...
【清晰教程】本地部署DeepSeek-r1模型
【清晰教程】通过Docker为本地DeepSeek-r1部署WebUI界面-CSDN博客 目录 Ollama 安装Ollama DeepSeek-r1模型 安装DeepSeek-r1模型 Ollama Ollama 是一个开源工具,专注于简化大型语言模型(LLMs)的本地部署和管理。它允许用户在本地计算机…...
教程 | Proxmox VE(PVE)安装全流程指南(末尾附镜像及快速配置脚本)
Proxmox VE 是一款基于 Debian 的开源虚拟化平台,支持 KVM 虚拟机和 LXC 容器,广泛用于企业级虚拟化部署。 一、安装前准备 1. 硬件要求 CPU:64位处理器(Intel VT/AMD-V 虚拟化支持)内存:至少 4GB&#x…...
【matlab优化算法-17期】基于DBO算法的微电网多目标优化调度
基于蜣螂DBO算法的微电网多目标优化调度 一、前言 微电网作为智能电网的重要组成部分,其优化调度对于降低能耗、减少环境污染具有重要意义。本文介绍了一个基于Dung Beetle Optimizer(DBO)算法的微电网多目标优化调度项目,旨在通…...
如何使用qt开发一个xml发票浏览器,实现按发票样式显示
使用Qt开发一个按发票样式显示的XML发票浏览器,如下图所示样式: 一、需求: 1、按税务发票样式显示。 2、拖入即可显示。 3、正确解析xml文件。 二、实现 可以按照以下步骤进行: 1. 创建Qt项目 打开Qt Creator,创…...
八股文-2025-02-12
BFC BFC属于普通流。BFC全称是Block Formatting Context,意思就是块级格式化上下文。你可以把BFC看做元素的一个属性,当元素拥有BFC属性,这个元素就可以看作是隔离了的独立容器,容器里边的元素不会影响到容器外部的元素.https://b…...
解析 JavaScript 面试题:`index | 0` 确保数组索引为整数
文章目录 一、JavaScript 中的数字类型二、按位或运算符 | 的作用(一)对于整数(二)对于小数(三)对于非数字值 三、用于数组索引的意义 在 JavaScript 面试中,常常会涉及到一些看似简单却蕴含着深…...
苹果手机快捷指令----敲击背面实现自动插入日期
前一段时间因为写文章,每一次总是在手机上面敲击日期觉得非常麻烦,于是自己鼓捣如何自动插入的办法。下面分享在网络上面查阅到的资料,由于实操的原因,遇到了很多困难。现在补充上去。先演示一遍效果。 https://www.bilibili.com…...
Base64 PDF解析器
<!DOCTYPE html> <html lang="en"> <head><meta charset="UTF-8"><title>Base64 PDF解析器</title><style>body {font-family: Arial, sans-serif;max-width: 800px;margin: 20px auto;padding: 20px;}.contain…...
SQL-leetcode—1393. 股票的资本损益
1393. 股票的资本损益 Stocks 表: ---------------------- | Column Name | Type | ---------------------- | stock_name | varchar | | operation | enum | | operation_day | int | | price | int | ---------------------- (stock_name, operation_day) 是这张…...
Java NIO基础与实战:如何提升IO操作性能
Java NIO 概述 Java NIO(新 I/O)是 Java 提供的一个更为高效的 I/O 处理框架。Java NIO(New I/O)是对传统 I/O(java.io)模型的改进,它引入了非阻塞 I/O 操作和面向缓冲区的数据读写方式&#x…...
46 map与set
目录 一、序列式容器和关联式容器 二、set系列的使用 (一)set和mutilset参考文档链接 (二)set类模板介绍 1、set类声明 2、set的构造和迭代器 3、set的增删查 (三)multiset类模板 1、multiset和se…...
GPT 系列模型发展史:从 GPT 到 ChatGPT 的演进与技术细节
从 GPT 到 ChatGPT,OpenAI 用短短几年时间,彻底改变了自然语言处理(NLP)的格局。让我们一起回顾这段激动人心的技术演进史!🚀 🔹 GPT(2018): 划时代的起点&a…...
RAGFlow和Dify对比
RAGFlow和Dify都是基于大语言模型(LLM)的应用开发平台,具有相似的功能和应用场景,但它们在技术架构、部署要求和用户体验上存在一些差异。 RAGFlow和Dify对比 2025-02-13 22.08 RAGFlow 技术栈:RAGFlow…...
Dart 3.5语法 14-16
017自定代码段让变量有默认值 List下标访问和2种for循环遍历_哔哩哔哩_bilibilihttps://www.bilibili.com/video/BV1RZ421p7BL?spm_id_from333.788.videopod.episodes&vd_source68aea1c1d33b45ca3285a52d4ef7365f&p42原作者链接,此为修订补充版本 014main…...
yanshee机器人初次使用说明(备注)-PyCharm
准备 需要: 1,(优必选)yanshee机器人Yanshee 开发者说明 2,手机-联网简单操控 / HDMI线与显示器和键鼠标-图形化开发环境 / 笔记本(VNC-内置图形化开发环境/PyCharm等平台)。 3,P…...
面试题:如何在10亿个数中判断某个数是否存在?
参考视频 参考视频: 如何用10只老鼠试出藏在99瓶清水中的那瓶毒药 参考视频...
