当前位置：首页 > news >正文

后端服务迁移方案及过程记录

news 文章来源：https://blog.csdn.net/duagh7/article/details/131906101 2025/5/22 21:11:52

阶段时序动作
双写+数据对比1新rdb集群上线
双写+数据对比2新服务上线，无流量
双写+数据对比2后端自己发起的流程比如job，新服务上线一份新的，独立运行
双写+数据对比2消费二方mq，新服务使用新的消费组消费原有消息
双写+数据对比3新旧服务比较转发服务comparator上线，定时拉取新旧库数据对比是否一致，并打印对比日志
双写+数据对比4旧服务改造上线
双写+数据对比4旧服务http读、写请求转发comparator，再转发到新服务
双写+数据对比5运行若干天，根据数据对比结果处理程序问题，无问题后可确认写程序已无问题
双写+数据对比5comparator打印部分新服务读请求结果，同时调用旧服务获取结果，对比是否一致，无问题后可确认读程序已无问题
灰度6由于数据是周期性的，而后台管理系统仅是内部人员使用，因此数据不做迁移，后台使用新旧不同前端入口做灰度流量转发
灰度6新服务新增数据id起始值远大于旧服务id最大值
灰度6由于是任务发放的业务，c端不产生新数据，都由后端生成数据，接口如果有id，转发旧服务，旧服务加开关，如大于阈值则转发新服务
灰度6c端接口根据id查询，转发旧服务，旧服务加开关，如大于阈值则转发新服务，小于则继续走旧服务
灰度6c端列表接口聚合新旧服务数据，旧服务做聚合，加开关
切流过渡期7旧服务已无有效数据，关闭聚合逻辑
切流完成8旧服务只做转发
ip漂移9旧服务的ip漂移至新服务，完成迁移

阶段	时序	动作
双写+数据对比	1	新rdb集群上线
双写+数据对比	2	新服务上线，无流量
双写+数据对比	2	后端自己发起的流程比如job，新服务上线一份新的，独立运行
双写+数据对比	2	消费二方mq，新服务使用新的消费组消费原有消息
双写+数据对比	3	新旧服务比较转发服务comparator上线，定时拉取新旧库数据对比是否一致，并打印对比日志
双写+数据对比	4	旧服务改造上线
双写+数据对比	4	旧服务http读、写请求转发comparator，再转发到新服务
双写+数据对比	5	运行若干天，根据数据对比结果处理程序问题，无问题后可确认写程序已无问题
双写+数据对比	5	comparator打印部分新服务读请求结果，同时调用旧服务获取结果，对比是否一致，无问题后可确认读程序已无问题
灰度	6	由于数据是周期性的，而后台管理系统仅是内部人员使用，因此数据不做迁移，后台使用新旧不同前端入口做灰度流量转发
灰度	6	新服务新增数据id起始值远大于旧服务id最大值
灰度	6	由于是任务发放的业务，c端不产生新数据，都由后端生成数据，接口如果有id，转发旧服务，旧服务加开关，如大于阈值则转发新服务
灰度	6	c端接口根据id查询，转发旧服务，旧服务加开关，如大于阈值则转发新服务，小于则继续走旧服务
灰度	6	c端列表接口聚合新旧服务数据，旧服务做聚合，加开关
切流过渡期	7	旧服务已无有效数据，关闭聚合逻辑
切流完成	8	旧服务只做转发
ip漂移	9	旧服务的ip漂移至新服务，完成迁移

后端服务迁移方案及过程记录

阶段时序动作双写数据对比1新rdb集群上线双写数据对比2新服务上线，无流量双写数据对比2后端自己发起的流程比如job，新服务上线一份新的，独立运行双写数据对比2消费二方mq，新服务使用新的消费组消费原有消息双写数据对比3新旧服务比…...

编程日记 2023/7/27 2:52:02

StAX解析

StAX解析 StAX解析介绍 StAX解析与SAX解析类似，也是基于事件驱动的，不同之处在于StAX采用的是拉模式，应用程序通过调用解析器推进解析的进程，可以调用next()方法来获取下一个解析事件(开始文档，结束文档，开…...

编程日记 2023/7/27 2:51:01

[MCU]AUTOSAR COM STACK - CAN协议栈

各层PDU PDU：Protocal Data Unit，协议数据单元，由SDU和PCI组成； I-PDU：Interaction Layer PDU，数据交互层PDU；N-PDU：NetWork Layer PDU，网络层PDU，通常用的…...

编程日记 2023/7/27 2:50:00

React：从 npx开始

使用 npm 来创建第一个 recat 文件（ react-demo 是文件名，可以自定义） npx create-react-app react-demo npx是 npm v5.2 版本新添加的命令，用来简化 npm 中工具包的使用原始： 全局安装npm i -g create-react-app 2 …...

编程日记 2023/7/27 2:48:58

力扣热门100题之接雨水【困难】

题目描述给定 n 个非负整数表示每个宽度为 1 的柱子的高度图，计算按此排列的柱子，下雨之后能接多少雨水。示例 1： 输入：height [0,1,0,2,1,0,1,3,2,1,2,1] 输出：6 解释：上面是由数组 [0,1,0,2,1,0,1,3…...

编程日记 2023/7/27 2:47:57

Stable-Diffusion-Webui部署SDXL0.9报错参数shape不匹配解决

问题已经在model/stable-diffusion文件夹下放进去了sdxl0.9的safetensor文件，但是在切换model的时候，会报错model的shape不一致。解决方法 git pullupdate一些web-ui项目就可以，因为当前项目太老了，没有使用最新的版本。...

编程日记 2023/7/27 2:46:54

Springboot @Async 多线程获取返回值

Springboot Async 多线程获取返回值需求背景最近需要用到多线程, 自己维护线程池很麻烦, 正好看到Springboot集成线程池的例子, 这里自己做了个尝试和总结, 记录一下, 也分享给需要的朋友; 不考虑事务的情况下, 这个多线程实现比较简单, 主要有以下几点: 在启动类加上Enab…...

编程日记 2023/7/27 2:45:52

怎样接入chatGPT

官网链接： OpenAI platform...

编程日记 2023/7/27 2:44:51

Docker consul容器服务更新与发现

Docker consul容器服务更新与发现一、什么事服务注册与发现二、什么是consul三、consul部署1、consul服务器2、registrator服务器3、consul-template 一、什么事服务注册与发现服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可…...

编程日记 2023/7/27 2:43:50

文章目录顺时针打印二维数组0所在的行列清零顺时针打印二维数组 package 每日算法学习打卡.算法打卡.七月份.七月二十六号;public class test1 {public static void main(String[] args) {int[][] matrix {{1,2},{5,6},{9,10},{13,14},};print(matrix);}static void print(i…...

编程日记 2023/7/27 2:42:49

微服务系列（1）-who i am？

微服务系列（1）-我是谁应用架构的演化简单来说系统架构可以分为以下几个阶段：复杂的臃肿的单体架构-SOA架构-微服务单体架构及其所面临的问题在互联网发展初期，用户数量少，流量小，硬件成本高。因此…...

编程日记 2023/7/27 2:41:47

记录这这段时间发生的事情。

当做后端的时候总是被骂做前很丑。成为一个UI设计师与后端工程师才会更加完美。尝试着做一个主页面。创建了一个主页面的表格index。收录了希望发送到主页的，的帖子。并且，可以填写是否可以。一个看起来不错的主页。标题设计的左右框。这种框…...

编程日记 2023/7/27 2:40:46

发布npm包流程

发布npm包的步骤如下： 在终端中通过 npm init 命令创建一个新的npm包，按照提示填写包的信息，如包名称、版本、描述、作者、许可证等。在包的根目录下创建一个 index.js 文件，编写你的代码。确认你已经注册了npm账号&#xff0…...

编程日记 2023/7/27 2:39:45

面试官：Redis 为什么变慢了？怎么解决？

一、Redis为什么变慢了二、Redis如何优化三、Redis变慢了排查步骤一、Redis为什么变慢了 1.Redis真的变慢了吗？ 对 Redis 进行基准性能测试例如，我的机器配置比较低，当延迟为 2ms 时，我就认为 Redis 变慢了，…...

编程日记 2023/7/27 2:38:44

Docker:开启应用程序开发新篇章的利器

Docker：开启应用程序开发新篇章的利器引言：1. Docker 的基本概念2. Docker 的优势3. Docker 在应用程序开发中的实际应用如何创建docker镜像如何部署docker镜像结论： 引言： 在现代软件开发领域中，容器化技术正在迅猛…...

编程日记 2023/7/27 2:37:43

Python面向对象（三）（继承、封装）

面向对象的三大特性面向对象编程，是许多编程语言都支持的一种编程思想。简单理解是：基于模板（类）去创建实体（对象），使用对象完成功能开发。面向对象包含3大主要特性： 封装封…...

编程日记 2023/7/27 2:36:43

Redis Stream 流的深度解析与实现高级消息队列【一万字】

详细介绍了 Redis 5.0 版本新增加的数据结构Stream的使用方式以及原理，如何实现更加可靠的消息队列。文章目录 Stream 概述2 Stream基本结构3 存储数据3.1 Entry ID3.2 数量限制 4 获取数据4.1 范围查询4.2 独立消费消息4.2.1 非阻塞使用4.2.2 阻塞的使用 4.3 消费…...

编程日记 2023/7/27 2:35:41

一个灵活、现代的Android应用架构

一个灵活、现代的Android应用架构学习Android架构的原则：学习原则，不要盲目遵循规则。本文旨在通过示例演示实际应用：通过示范Android架构来进行教学。最重要的是，这意味着展示出如何做出各种架构决策。在某些情况下&#xff0…...

编程日记 2023/7/27 2:34:40

redis高级篇 springboot+redis+bloomfilter实现过滤案例

一 bloomfilter的作用 1.1 作用 Bloomfilter：默认是有0组成bit数组和hash函数构成的数据结构，用来判断在海量数据中是否存在某个元素。应用案例：解决缓存穿透。Bloomfilter放在redis前面，如果查询bf中没有则直接返回&#xff…...

编程日记 2023/7/27 2:33:39

mybatis学习笔记之在WEB中应用MyBatis

文章目录数据库表的设计和准备数据环境搭建前端页面编写后端代码实现后端代码目录dao层servicewebpojoUtils 数据库表的设计和准备数据环境搭建在pom.xml中配置依赖（logback、mybatis、mysql、servlet） 注意引入tomcat 前端页面编写 <!DOCTYPE …...

编程日记 2023/7/27 2:32:38

宿主可以访问公网 Docker容器里无法访问 Temporary failure in name resolution

宿主可以访问公网 Docker容器里无法访问 Temporary failure in name resolution 容器参数 docker-compose.yml 的 dns我也设置，按理来说应该可以访问，然而就是不断的按在地上摩擦 web:build: .restart: alwaysports:- "6699:80"dns:- 114.11…...

编程日记 2023/7/27 2:31:36