当前位置: 首页 > news >正文

gh-ost概述(二实践)

注意:只适用于拥有主键或者唯一键的表,不存在触发器的表
一、gh-ost的安装部署
0、yum -y install golang
1、进入官网GitHub - github/gh-ost: GitHub’s Online Schema-migration Tool for MySQL
2、下载gh-ost-master.zip包
3、解压unzip gh-ost-master.zip
4、cd gh-ost-master
5、./build.sh 命令执行后,默认将安装包存放在/tmp/gh-ost-release下
6、cp /tmp/gh-ost-release/gh-ost-binary-linux-amd64-20230809165421.tar.gz /soft
7、cd /soft
8、tar -zxvf gh-ost-binary-linux-amd64-20230809165421.tar.gz 最终在当前目录下解压出gh-ost的命令文件
二、gh-ost在master/master-master上的应用
会在主库上使用ghost的命令。
1、增加列

./gh-ost --max-load=Threads_running=10 \
--critical-load=Threads_running=95 \
--chunk-size=1000 \
--initially-drop-socket-file \
--ok-to-drop-table \
--host="数据库主机IP" \
--port=3307 \
--user="user" \
--password="passwd" \
--assume-rbr \
--allow-on-master \
--assume-master-host=主库IP:端口 \
--database="数据库名" \
--table="表名" \
--panic-flag-file=/tmp/ghost.panic.flag
--alter="add column c6 varchar(50) not null default ''"   \
--serve-socket-file=/tmp/ghost.sock --verbose --execute 

解释:

2、增加索引

./gh-ost --max-load=Threads_running=10 \
--critical-load=Threads_running=95 \
--chunk-size=100 \
--initially-drop-socket-file \
--ok-to-drop-table \
--host="数据库主机IP" \
--port=3307 \
--user="user" \
--password="passwd" \
--assume-rbr \
--allow-on-master \
--assume-master-host=主库IP:端口 \
--database="数据库名" \
--table="表名" \
--alter="add index index_(id,createTime)"   \
--serve-socket-file=/tmp/ghost.sock --verbose --execute 

3、修改列名和类型
因为不区分大小写,fontSize的字段名,还是原样,类型发生了变化

./gh-ost --max-load=Threads_running=10 \
--critical-load=Threads_running=95 \
--chunk-size=100 \
--initially-drop-socket-file \
--ok-to-drop-table \
--host="数据库主机IP" \
--port=3307 \
--user="user" \
--password="passwd" \
--assume-rbr \
--allow-on-master \
--assume-master-host=主库IP:端口 \
--database="数据库名" \
--table="表名" \
--alter="change fontSize fontSize bigint"   \
--serve-socket-file=/tmp/ghost.sock --verbose --execute

4、删除列

./gh-ost --max-load=Threads_running=10 \
--critical-load=Threads_running=95 \
--chunk-size=100 \
--initially-drop-socket-file \
--ok-to-drop-table \
--host="数据库主机" \
--port=3307 \
--user="user" \
--password="passwd" \
--assume-rbr \
--allow-on-master \
--assume-master-host=数据库主库IP:端口 \
--database="数据库名" \
--table="表名" \
--alter="drop repetition"   \
--serve-socket-file=/tmp/ghost.sock --verbose --execute

三、gh-ost在master-slave上的应用
会在slave库上运行ghost命令
1、删除列

./gh-ost --max-load=Threads_running=10 \
--critical-load=Threads_running=95 \
--chunk-size=100 \
--initially-drop-socket-file \
--ok-to-drop-table \
--host="slave数据库主机IP" \
--port=3307 \
--user="user" \
--password="passwd" \
--database="数据库" \
--table="表名" \
--alter="drop bookCode"   \
--serve-socket-file=/tmp/ghost.sock --verbose --execute

四、其它补充
1、gh-ost 中 Mysql参数的影响
innodb_autoinc_lock_mode=0 传统模式
innodb_autoinc_lock_mode=1 不会因为row lock 和 auto-inc锁产生死锁问题
innodb_autoinc_lock_mode=2 间隙模式
当innodb_autoinc_lock_mode设置为1时,表示使用连续模式(consecutive mode)来锁定自增列。在这种模式下,InnoDB会锁住整个自增列范围,以确保在插入新记录时不会发生重复值。
具体来说,在连续模式下,当插入新数据时,InnoDB会获取一个全局的互斥锁(auto-inc lock),然后分配下一个可用的自增值。这样可以保证在多个并发插入操作中,每个插入的自增值都是唯一且递增的。
需要注意的是,使用连续模式可能会导致并发插入操作的性能瓶颈,因为每次插入都需要获取全局锁。如果您的应用程序有高并发的写入需求,您可以考虑将innodb_autoinc_lock_mode设置为2(间隙模式)或0(传统模式),以提高并发性能。
总之,innodb_autoinc_lock_mode=1表示InnoDB引擎将使用连续模式来锁定自增列,确保生成唯一且递增的自增值,但可能对并发性能有一定的影响。

2、gh-ost与其它方式的DDL同时作用一张表
在gh-ost的对某表执行ddl期间,不可采用其它方式对表进行DDL,因为其它的DDL操作将不会生效。

3、gh-ost DDL的另类等待
存在大量写的事务时,不可执行gh-ost。因为不采取其它方式干预的情形下,gh-ost会一直等待,等待事务的完成。原因是gh-ost的binlog应用优先于row copy,且apply binlog是单线程,导致row copy数不发生变化。

相关文章:

gh-ost概述(二实践)

注意:只适用于拥有主键或者唯一键的表,不存在触发器的表 一、gh-ost的安装部署 0、yum -y install golang 1、进入官网GitHub - github/gh-ost: GitHub’s Online Schema-migration Tool for MySQL 2、下载gh-ost-master.zip包 3、解压unzip gh-ost-mast…...

临时文档3

Set接口 说一下 HashSet 的实现原理? HashSet 是基于 HashMap 实现的,HashSet的值存放于HashMap的key上,HashMap的value统一为PRESENT,因此 HashSet 的实现比较简单,相关 HashSet 的操作,基本上都是直接调…...

【OpenGauss源码学习 —— 执行算子(SeqScan算子)】

执行算子(SeqScan算子) 执行算子概述扫描算子SeqScan算子ExecInitSeqScan函数InitScanRelation函数ExecSeqScan函数 总结 声明:本文的部分内容参考了他人的文章。在编写过程中,我们尊重他人的知识产权和学术成果,力求遵…...

Postman中,既想传递文件,还想传递多个参数(后端)

需求:既想传文件又想传多个参数可以用以下方式实现...

跨境干货|TikTok变现的9种方法

在这个流量为王的时代,哪里有流量,哪里就有商机。TikTok作为近几年最火爆的社媒平台之一,在全球范围都具有一定的影响力。随着TikTok Shop等商务功能加持上线,更是称为跨境电商的新主场之一。 在这样的UGC平台,想要变…...

Grafana 曲线图报错“parse_exception: Encountered...”

问题现象 配置的Grafana图报错如下: 原因分析 点开报错,可以看到报错详细信息,是查询语句的语法出现了异常。 变量pool的取值为None 解决方案 需要修改变量pool的查询SQL,修改效果如下: 修改后&#x…...

idea中提示Unsupported characters for the charset ‘ISO-8859-1‘

application.properties中文注释拉黄线 ,提示Unsupported characters for the charset ISO-8859-1 解决办法: 注意: 改完之后之前输入的中文就变成“ ???”了,建议备份一下 1、打开setti…...

通过signtool进行数字签名和验证签名

(一)如何签名 SignTool.exe (Sign Tool) - .NET Framework | Microsoft Learn Using SignTool to Sign a File - Win32 apps | Microsoft Learn 签名命令行: signtool.exe sign /f xxx.pfx /t http://timestamp.digicert.com yyy.dll xx…...

geeemap学习总结(2)——地图底图应用

1. 加载库中已有图层 import os os.environ[HTTP_PROXY] http://127.0.0.1:8001 os.environ[HTTPS_PROXY] http://127.0.0.1:8001 # 设置中心位置/地图层级/图层加载高度,加载图层 import geemap Mapgeemap.Map(center[40, 100], zoom4, height600) Map# 添加已经…...

flutter 手写日历组件

先看效果 直接上代码 calendar_popup_view.dart import package:flutter/material.dart; import package:intl/intl.dart;import custom_calendar.dart; import hotel_app_theme.dart;class CalendarPopupView extends StatefulWidget {const CalendarPopupView({required th…...

C++动态规划经典试题解析之打家劫舍系列

1.前言 力扣上有几道与打家劫舍相关的题目,算是学习动态规划时常被提及的经典试题,很有代表性,常在因内大大小小的社区内看到众人对此类问题的讨论。 学习最好的方式便是归纳总结、借鉴消化,基于这个目的,本文对此类问题也做了讲解,在一些优秀思想的基础上添加了个人观…...

24届近5年东南大学自动化考研院校分析

今天给大家带来的是东南大学控制考研分析 满满干货~还不快快点赞收藏 一、东南大学 学校简介 东南大学是我国最早建立的高等学府之一,素有“学府圣地”和“东南学府第一流”之美誉。东南大学前身是创建于1902年的三江师范学堂。1921年经近代著名教育家…...

electron、electron-forge 安装

npm修改了registry,安装依旧无效 使用cnpm 倒是可以解决,但是 npx electron-forge import 中 Installing dependencies 使用的是npm 给出一次性解决方案: step1:切换npm的下载源,可以使用nrm 进行管理,有…...

go的strings用法

strings 是 Go 语言标准库中提供的一个包,用于处理字符串相关的操作。这个包包含了许多函数,可以用于字符串的切割、拼接、替换、查找等操作。下面是一些常用的 strings 包函数和用法示例: package mainimport ("fmt""string…...

echo用法、linxu课堂练习题、作业题

一、课堂练习 练习一: 4、普通用户修改密码: root修改密码: 5、修改主机名:hostnamectl hostname 主机名 查看:hostnamectl或者cat etc/hostname 练习二: 1、 mkdir /root/html touch /root/html/index.…...

WordPress使用【前端投稿】功能时为用户怎么添加插入文章标签

在使用Wordpress做前端投稿功能的时候,可能需要用户填写文章标签,在插入文章的时候很多人不知道怎么把这些标签插入进去,下面这篇文章来为大家带来WordPress使用前端投稿功能时插入文章标签方法。 在Wordpress里 wp_insert_post 此函数的作…...

第二章:CSS基础进阶-part1:CSS高级选择器

文章目录 一、 组合选择器二、属性选择器三、伪类选择器1、动态伪类选择器2、状态伪类选择器3、结构性伪类选择器4、否定伪类选择器 一、 组合选择器 后代选择器:E F子元素选择器: E>F相邻兄弟选择器:EF群组选择器:多个选择器…...

js 正则表达式 限制input元素内容必须以abc开头,123结尾

要通过正则表达式验证一个输入元素的内容是否以"abc"开头且以"123"结尾,您可以使用 ^ 表示开头,$ 表示结尾,以及适当的字符类或具体字符。以下是一个示例正则表达式: var regex /^abc.*123$/;上面的正则表达…...

Linux下安装nginx (tar解压版安装)

Linux下安装nginx (tar安装) 1、下载nginx 官方下载地址https://nginx.org/en/download.html 在这里插入图片描述 2.解压 解压‘nginx-1.16.1.tar.gz’到指定目录(/usr/local/myWorkSpace)并且重命名 命令: tar -xvf nginx-1.16.1.tar.gz …...

不同组件之间相互传递信息的方式(拓展知识)

文章目录 🐒个人主页🏅JavaEE系列专栏📖前言:🏨补充知识:不同组件之间通过get()方式传递信息 🎀父组件与子组件之间的信息交互 $emit 方法🏅父组件给子组件发…...

云原生核心技术 (7/12): K8s 核心概念白话解读(上):Pod 和 Deployment 究竟是什么?

大家好,欢迎来到《云原生核心技术》系列的第七篇! 在上一篇,我们成功地使用 Minikube 或 kind 在自己的电脑上搭建起了一个迷你但功能完备的 Kubernetes 集群。现在,我们就像一个拥有了一块崭新数字土地的农场主,是时…...

AI Agent与Agentic AI:原理、应用、挑战与未来展望

文章目录 一、引言二、AI Agent与Agentic AI的兴起2.1 技术契机与生态成熟2.2 Agent的定义与特征2.3 Agent的发展历程 三、AI Agent的核心技术栈解密3.1 感知模块代码示例:使用Python和OpenCV进行图像识别 3.2 认知与决策模块代码示例:使用OpenAI GPT-3进…...

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别

OpenPrompt 和直接对提示词的嵌入向量进行训练有什么区别 直接训练提示词嵌入向量的核心区别 您提到的代码: prompt_embedding = initial_embedding.clone().requires_grad_(True) optimizer = torch.optim.Adam([prompt_embedding...

Spring AI与Spring Modulith核心技术解析

Spring AI核心架构解析 Spring AI(https://spring.io/projects/spring-ai)作为Spring生态中的AI集成框架,其核心设计理念是通过模块化架构降低AI应用的开发复杂度。与Python生态中的LangChain/LlamaIndex等工具类似,但特别为多语…...

Unsafe Fileupload篇补充-木马的详细教程与木马分享(中国蚁剑方式)

在之前的皮卡丘靶场第九期Unsafe Fileupload篇中我们学习了木马的原理并且学了一个简单的木马文件 本期内容是为了更好的为大家解释木马(服务器方面的)的原理,连接,以及各种木马及连接工具的分享 文件木马:https://w…...

【从零学习JVM|第三篇】类的生命周期(高频面试题)

前言: 在Java编程中,类的生命周期是指类从被加载到内存中开始,到被卸载出内存为止的整个过程。了解类的生命周期对于理解Java程序的运行机制以及性能优化非常重要。本文会深入探寻类的生命周期,让读者对此有深刻印象。 目录 ​…...

怎么开发一个网络协议模块(C语言框架)之(六) ——通用对象池总结(核心)

+---------------------------+ | operEntryTbl[] | ← 操作对象池 (对象数组) +---------------------------+ | 0 | 1 | 2 | ... | N-1 | +---------------------------+↓ 初始化时全部加入 +------------------------+ +-------------------------+ | …...

Linux基础开发工具——vim工具

文章目录 vim工具什么是vimvim的多模式和使用vim的基础模式vim的三种基础模式三种模式的初步了解 常用模式的详细讲解插入模式命令模式模式转化光标的移动文本的编辑 底行模式替换模式视图模式总结 使用vim的小技巧vim的配置(了解) vim工具 本文章仍然是继续讲解Linux系统下的…...

动态规划-1035.不相交的线-力扣(LeetCode)

一、题目解析 光看题目要求和例图,感觉这题好麻烦,直线不能相交啊,每个数字只属于一条连线啊等等,但我们结合题目所给的信息和例图的内容,这不就是最长公共子序列吗?,我们把最长公共子序列连线起…...

python基础语法Ⅰ

python基础语法Ⅰ 常量和表达式变量是什么变量的语法1.定义变量使用变量 变量的类型1.整数2.浮点数(小数)3.字符串4.布尔5.其他 动态类型特征注释注释是什么注释的语法1.行注释2.文档字符串 注释的规范 常量和表达式 我们可以把python当作一个计算器,来进行一些算术…...