分布式架构-Spring技术如何能实现分布式事务
在Spring技术栈中实现分布式事务,可通过多种成熟方案实现跨服务或跨数据库的事务一致性管理。以下是主要实现方式及技术要点:
一、基于Seata框架的AT模式
-
核心组件
- TC (Transaction Coordinator):全局事务协调器(独立部署的Seata Server)。
- TM (Transaction Manager):事务发起方,通过
@GlobalTransactional注解标记全局事务。 - RM (Resource Manager):分支事务参与者,通过
@Transactional管理本地事务。
-
实现步骤
- 引入Seata依赖(如
spring-cloud-starter-alibaba-seata)。 - 配置Seata Server地址及事务分组信息。
- 在业务方法上添加
@GlobalTransactional注解,自动注册分支事务并协调全局提交/回滚。
- 引入Seata依赖(如
-
适用场景
- 基于关系型数据库的微服务架构,要求对业务代码低侵入。
二、基于消息队列的最终一致性
-
RocketMQ事务消息
- 半消息机制:发送半消息到MQ(此时消息不可消费)→ 执行本地事务 → 根据本地事务结果提交或回滚半消息。
- 消息回查:若未收到二次确认,MQ通过回查机制确认事务状态。
-
Spring Boot整合实现
- 使用
RocketMQTemplate发送事务消息。 - 实现
TransactionListener接口处理本地事务及回查逻辑。
- 使用
-
适用场景
- 异步处理场景(如订单创建后异步扣减库存),通过消息队列解耦服务。
三、基于JTA/XA协议的两阶段提交
-
XA协议实现
- 通过
JtaTransactionManager协调多个XA资源(如数据库、消息队列)。 - 第一阶段(预提交):所有资源执行操作但不提交。
- 第二阶段(提交/回滚):协调器根据预提交结果决定全局提交或回滚。
- 通过
定义:
XA协议主要定义了事务管理器(TM)和资源管理器(RM)之间的接口。TM负责协调参与全局事务的各个资源管理器,确保所有参与者准备就绪后才能提交事务,从而保证数据的强一致性。RM通常由数据库实现,如Oracle、DB2、MySQL等,这些数据库都支持XA接口
XA协议的实现机制:
XA协议采用两阶段提交(Two-Phase Commit, 2PC)机制来实现分布式事务。两阶段提交过程包括准备阶段和提交阶段:
准备阶段:TM向所有RM发送准备提交的请求,RM在接到请求后写入Undo和Redo日志,并响应TM是否准备好提交。
提交阶段:如果所有RM都准备好,TM发送提交命令;如果有RM未准备好或超时,TM发送回滚命令。
-
Spring配置
- 配置XA数据源(如
AtomikosDataSourceBean)。 - 声明
JtaTransactionManager管理全局事务38。
- 配置XA数据源(如
-
适用场景
- 传统单体应用整合多个XA兼容资源(如跨数据库操作)38。
四、TCC模式(补偿型事务)
-
核心流程
- Try阶段:预留资源(如冻结库存)。
- Confirm/Cancel阶段:根据Try结果提交或回滚。
-
Spring实现
- 自定义TCC接口,通过AOP拦截Try/Confirm/Cancel逻辑。
- 结合分布式锁保证幂等性。
-
适用场景
- 高并发场景需自定义事务边界(如金融支付系统)。
五、方案对比与选型
| 方案 | 优点 | 缺点 | 适用场景 |
|---|---|---|---|
| Seata AT模式 | 低侵入性,自动化回滚 | 依赖独立TC组件,需数据库支持 | 常规微服务业务 |
| RocketMQ事务消息 | 高吞吐,服务解耦 | 需处理消息重复消费问题 | 异步最终一致性场景 |
| JTA/XA | 强一致性,标准化协议 | 性能较低,资源锁定时间长 | 传统XA兼容系统整合 |
| TCC模式 | 灵活控制事务边界 | 业务侵入性强,需实现补偿逻辑 | 高并发或复杂业务逻辑 |
六、总结
- 优先选择Seata AT模式:适合大多数微服务场景,简化开发流程。
- 最终一致性场景选消息队列:如电商订单与库存的异步处理。
- 强一致性需求考虑JTA/XA:适用于传统企业级应用。
- 复杂业务逻辑采用TCC:需自定义补偿逻辑的高并发场景。
拓展思考
异步最终一致性场景,能否通过redis方案来做实现呢?
在最终一致性场景下,可以通过Redis方案实现数据同步,但需结合特定的缓存策略和异步机制。以下是具体实现方案及技术要点:
一、Redis实现最终一致性的核心方案
-
Cache Aside模式(旁路缓存)
- 读写流程:
- 写操作:先更新数据库 → 后删除Redis缓存(或标记缓存失效)。
- 读操作:先查Redis → 未命中则查数据库 → 将结果写入Redis。
- 优点:降低缓存与数据库的同步频率,减少并发冲突。
- 适用场景:读多写少场景(如用户信息查询)。
- 读写流程:
-
异步更新策略(基于消息队列或Binlog监听)
- MySQL Binlog监听:
- 使用Canal等工具监听数据库变更 → 异步更新Redis。
- 优点:完全解耦业务代码,适合数据量大的场景。
- 消息队列中间件:
- 数据库更新后发送消息到MQ → 消费者异步更新Redis。
- 优点:支持失败重试机制,保证最终一致性。
- MySQL Binlog监听:
二、关键实现细节与注意事项
-
延迟双删策略
- 问题:高并发场景下可能出现旧数据回写。
- 解决方案:更新数据库后 → 首次删除缓存 → 延迟一定时间 → 再次删除缓存。
- 示例代码(Spring Boot):
@Transactional public void updateData(Data data) {// 1. 更新数据库dataRepository.save(data);// 2. 删除缓存redisTemplate.delete("data:" + data.getId());// 3. 延迟二次删除(异步任务)scheduledExecutor.schedule(() -> redisTemplate.delete("data:" + data.getId()), 500, TimeUnit.MILLISECONDS); }
-
补偿机制设计
- 失败重试:通过MQ或本地事件表记录失败操作,定时重试。
- 数据版本号:在Redis中存储数据版本号,避免旧数据覆盖新数据。
-
分布式锁控制并发
- 场景:多个线程同时触发缓存更新时,需通过分布式锁保证原子性。
- 实现示例(Redisson):
RLock lock = redissonClient.getLock("data_lock:" + dataId);
try {lock.lock();// 执行数据库查询和缓存更新
} finally {lock.unlock();
}
三、方案对比与选型建议
| 方案 | 优点 | 缺点 | 适用场景 |
|---|---|---|---|
| Cache Aside模式 | 低侵入性,实现简单 | 高并发下可能短暂不一致 | 常规业务场景(如用户信息) |
| Binlog监听 | 完全解耦业务代码 | 依赖中间件,部署复杂度高 | 大数据量、低延迟要求场景 |
| 消息队列异步更新 | 支持失败重试,可靠性高 | 需维护MQ消费者和消息积压问题 | 需强最终一致性的订单类业务 |
四、总结
Redis可通过以下方式支持最终一致性场景:
- Cache Aside模式:通过“更新数据库+删除缓存”策略,结合延迟双删和补偿机制。
- 异步更新机制:基于Binlog监听或消息队列,实现数据库与Redis的最终一致性。
- 高并发控制:使用分布式锁和版本号校验,避免并发写入导致的脏数据。
推荐选型:
- 常规业务优先选择Cache Aside模式,开发成本低且易维护。
- 高可靠性场景使用消息队列异步更新,结合重试机制提升容错性
相关文章:
分布式架构-Spring技术如何能实现分布式事务
在Spring技术栈中实现分布式事务,可通过多种成熟方案实现跨服务或跨数据库的事务一致性管理。以下是主要实现方式及技术要点: 一、基于Seata框架的AT模式 核心组件 TC (Transaction Coordinator):全局事务协调器(独立部署…...
【RocketMQRocketMQ Dashbord】Springboot整合RocketMQ
【RocketMQ&&RocketMQ Dashbord】Springboot整合RocketMQ 【一】Mac安装RocketMQ和RocketMQ Dashbord【1】安装RocketMQ(1)下载(2)修改 JVM 参数(3)启动测试(4)关闭测试&…...
vue 3 深度指南:从基础到全栈开发实践
目录 一、环境搭建与项目初始化 1. 前置依赖安装 2. 项目初始化与结构解析 二、核心概念与语法深度解析 1. MVVM 模式与响应式原理 2. 模板语法与指令进阶 3. 组件化开发 三、进阶开发与全栈集成 1. 路由管理(Vue Router) 2. 状态管理…...
《白帽子讲 Web 安全》之跨站请求伪造
引言 在数字化时代,网络已深度融入人们生活的方方面面,Web 应用如雨后春笋般蓬勃发展,为人们提供着便捷高效的服务。然而,繁荣的背后却潜藏着诸多安全隐患,跨站请求伪造(CSRF)便是其中极为隐蔽…...
K8S学习之基础五十:k8s中pod时区问题并通过kibana查看日志
k8s中pod默认时区不是中国的,挂载一个时区可以解决 vi pod.yaml apiVersion: v1 kind: Pod metadata:name: counter spec:containers:- name: countimage: 172.16.80.140/busybox/busybox:latestimagePullPolicy: IfNotPresentargs: [/bin/sh,-c,i0;while true;do …...
nginx代理前端请求
一,项目配置 我在 ip 为 192.168.31.177 的机器上使用 vue3 开发前端项目,项目中使用 axios 调用后端接口。 这是 axios 的配置: import axios from axios;const request axios.create({baseURL: http://192.168.31.177:8001,// 设置请求…...
LibVLC —— 《基于Qt的LibVLC专业开发技术》视频教程
🔔 LibVLC/VLC 相关技术、疑难杂症文章合集(掌握后可自封大侠 ⓿_⓿)(记得收藏,持续更新中…) 《基于Qt的LibVLC专业开发技术》课程视频,(CSDN课程主页、51CTO课程主页) 适合具有一些C++/Qt编程基础,想要进一步提高或涉足音视频行业的。本课程分7章节,共计35小节。…...
Android生态大变革,谷歌调整开源政策,核心开发不再公开
“开源”这个词曾经是Android的护城河,如今却成了谷歌的烫手山芋。最近谷歌宣布调整Android的开源政策,核心开发将全面转向私有分支。翻译成人话就是:以后Android的核心更新,不再公开共享了。 这操作不就是开源变节吗,…...
Android Gradle 插件问题:The option ‘android.useDeprecatedNdk‘ is deprecated.
问题与处理策略 问题描述 在 Android 项目中,报如下警告 The option android.useDeprecatedNdk is deprecated. The current default is false. It has been removed from the current version of the Android Gradle plugin. NdkCompile is no longer supported…...
【web应用安全】关于web应用安全的几个主要问题的思考
文章目录 防重放攻击1. **Token机制(一次性令牌)**2. **时间戳 超时验证**3. **Nonce(一次性随机数)**4. **请求签名(如HMAC)**5. **HTTPS 安全Cookie**6. **幂等性设计****综合防御策略建议****注意事项…...
Git 基础入门:从概念到实践的版本控制指南
一、Git 核心概念解析 1. 仓库(Repository) Git 的核心存储单元,包含项目所有文件及其完整历史记录。分为本地仓库(开发者本地副本)和远程仓库(如 GitHub、GitLab 等云端存储),支持…...
银行分布式新核心的部署架构(两地三中心)
银行的核心系统对可用性和性能要求均非常严苛,所以一般都采用两地三中心部署模式。 其中: 同城两个主数据中心各自部署一套热备,平时两个中心同时在线提供服务,进行负载均衡假如其中一个数据中心出现异常,则由另外一个…...
Spring 及 Spring Boot 条件化注解(15个)完整列表及示例
Spring 及 Spring Boot 条件化注解完整列表及示例 1. 所有条件化注解列表 Spring 和 Spring Boot 提供了以下条件化注解(共 15 个),用于在配置类或方法上实现条件化注册 Bean 或配置: 注解名称作用来源框架Conditional自定义条件…...
MantisBT在Windows10上安装部署详细步骤
MantisBT 是一款基于 Web 的开源缺陷跟踪系统,以下是在 Windows 10 上安装部署 MantisBT 的详细步骤: 1. 安装必要的环境 MantisBT 是一个基于 PHP 的 Web 应用程序,因此需要安装 Web 服务器(如 Apache)、PHP 和数据…...
9.4分漏洞!Next.js Middleware鉴权绕过漏洞安全风险通告
今日,亚信安全CERT监控到安全社区研究人员发布安全通告,Next.js 存在一个授权绕过漏洞,编号为 CVE-2025-29927。攻击者可能通过发送精心构造的 x-middleware-subrequest 请求头绕过中间件安全控制,从而在未授权的情况下访问受保护…...
处理json,将接口返回的数据转成list<T>,和几个时间处理方法的工具类
接口或者其他方式返回json格式,也可以直接处理里边只有list的json数据 //第一种json格式,包含分页信息 {"code": 200,"msg": null,"data": {"records": [{"风速": "0.0","电流"…...
OpenCV图像拼接(5)图像拼接模块的用于创建权重图函数createWeightMap()
操作系统:ubuntu22.04 OpenCV版本:OpenCV4.9 IDE:Visual Studio Code 编程语言:C11 算法描述 cv::detail::createWeightMap 是 OpenCV 库中用于图像拼接模块的一个函数,主要用于创建权重图。这个权重图在图像拼接过程中扮演着重…...
linux 运行脚本命令区别
文章目录 chmod 赋予权限运行sh script.sh适用场景 bash script.shsource 或 . 脚本 chmod 赋予权限运行 chmod x script.sh # 赋予执行权限 ./script.sh # 直接执行创建新的子进程,不会影响当前 shell 的环境变量。#!(Shebang) 指…...
【01】噩梦终结flutter配安卓android鸿蒙harmonyOS 以及next调试环境配鸿蒙和ios真机调试环境-flutter项目安卓环境配置
噩梦终结:Flutter 配安卓、鸿蒙、iOS 真机调试环境 问题背景 很多开发者在配置 Flutter 项目环境时遇到困难,尤其是在处理 Android、鸿蒙和 iOS 真机调试环境时。卓伊凡最近接手了一个项目,发现很多“专业程序员”在环境搭建上花费了大量时…...
C++11QT复习 (六)
类型转换函数和类域 **Day6-3 类型转换函数和类域****1. 类型转换函数(Type Conversion Functions)****1.1 概述****1.2 代码示例****1.3 关键优化** **2. 类域(Class Scope)****2.1 作用域 vs 可见域****2.2 代码示例****2.3 关键…...
区块链技术在投票系统中的应用:安全、透明与去中心化
区块链技术在投票系统中的应用:安全、透明与去中心化 【引言】 近年来,电子投票系统因其便捷性受到广泛关注,但随之而来的安全问题也屡见不鲜,如选票篡改、重复投票、数据泄露等。如何确保投票的公平性、透明度和安全性? 区块链技术或许是解决方案之一! 区块链的 去中…...
CTF类题目复现总结-[MRCTF2020]ezmisc 1
一、题目地址 https://buuoj.cn/challenges#[MRCTF2020]ezmisc二、复现步骤 1、下载附件,得到一张图片; 2、利用010 Editor打开图片,提示CRC值校验错误,flag.png应该是宽和高被修改了,导致flag被隐藏掉;…...
MetInfo6.0.0目录遍历漏洞原理分析
所需进行代码审计的文件路径: C:\phpStudy\WWW\MetInfo6.0.0\include\thumb.php C:\phpStudy\WWW\MetInfo6.0.0\app\system\entrance.php C:\phpStudy\WWW\MetInfo6.0.0\app\system\include\class\load.class.php C:\phpStudy\WWW\MetInfo6.0.0\app\system\include…...
linux打包前端vue,后端springboot项目
第一步先对整个项目进行通过maven进行clean在进行compile 第二步直接进行打包package和install都可以 第三部把对应的jar放到服务器上 把jar包放到服务器上某个地址下,然后cd到这个目录下,然后执行命令 nohup java -jar ruoyi-admin.jar > springbo…...
Elasticsearch:使用 AI SDK 和 Elastic 构建 AI 代理
作者:来自 Elastic Carly Richmond 你是否经常听到 AI 代理(AI agents)这个词,但不太确定它们是什么,或者如何在 TypeScript(或 JavaScript)中构建一个?跟我一起深入了解 AI 代理的概…...
SQLAlchemy 支持特殊字符
postgresql 实践 pydantic 实践(一)基础 pydantic 实践(二)数据校验 SQLAlchemy 介绍与实践 SQLAlchemy 支持特殊字符 SQLAlchemy 支持特殊字符 1. 字符集介绍分析2. MySQL 支持特殊字符2.1. 更新 MySQL 字符集为 utf8mb42.2 更新…...
Docker 快速入门指南
Docker 快速入门指南 1. Docker 常用指令 Docker 是一个轻量级的容器化平台,可以帮助开发者快速构建、测试和部署应用程序。以下是一些常用的 Docker 命令。 1.1 镜像管理 # 搜索镜像 docker search <image_name># 拉取镜像 docker pull <image_name>…...
计算机网络 - OSI 七层模型
OSI 七层模型 OSI(Open System Interconnection,开放系统互联)模型由 ISO(国际标准化组织) 制定,目的是为不同计算机网络系统之间的通信提供一个标准化的框架。它将网络通信划分为 七个层次,每…...
如何调整yarn.nodemanager.vmem-pmem-ratio参数?
调整 yarn.nodemanager.vmem-pmem-ratio 参数的步骤如下: 1. 打开 YARN 配置文件 找到 yarn-site.xml 文件,该文件通常位于 Hadoop 配置目录中,例如 /etc/hadoop/conf 或 /opt/module/hadoop-3.1.3/etc/hadoop。 2. 找到并修改 yarn.nodemana…...
自顶向下学习K8S--部署Agones
本文在本人博客,原文地址:http://viogami.tech/index.php/blog/346/ 我是gopher,离不开云原生,自然也逃不了理解docker和K8S这俩。今天抽空想玩下agones,进而对K8S有实践性的理解。 学一个新事物从底层理论学肯定是最…...
