小事务架构下的业务完整性保障:基于业务处理记录与补偿机制的技术实现
随着微服务架构、事件驱动架构(EDA)和最终一致性理念的普及,传统的大事务管理方式被更细粒度的“小事务”所取代。在这种架构中,全局业务流程被拆解成多个局部事务节点,通过异步消息进行编排。这种解耦提高了可扩展性和可用性,但也带来了 业务完整性难以追踪和保障 的挑战。
为此,引入“业务处理记录机制 + 补偿调度机制”成为保障业务一致性与可回溯性的关键手段。
🧱 一、为什么需要业务处理记录机制
在去中心化的微服务架构中,以下问题变得普遍:
| 问题 | 描述 |
|---|---|
| 无全局事务 | 跨多个服务/数据库的操作无法使用分布式事务(XA/2PC效率差、易死锁) |
| 异步消息丢失/重复消费 | 可能某个节点未处理成功或被重复触发,需判断是否已执行 |
| 补偿逻辑难以判定执行状态 | 无记录无法判断是否需要补偿、是否已经补偿、是否补偿成功 |
| 业务异常排查困难 | 无法得知哪个节点失败、失败原因、是否重试过、失败是否可重入 |
因此,必须显式记录业务每个节点的处理状态,以便实现幂等控制、链路追踪、补偿重试与审计可视化。
🛠 二、核心技术机制:业务处理记录表设计
设计一个通用的“业务节点处理日志表”(如下示例),用于记录每个微服务节点对某一业务的处理状态:
表结构:process_node_log
CREATE TABLE process_node_log (id BIGINT PRIMARY KEY AUTO_INCREMENT,biz_type VARCHAR(50) NOT NULL COMMENT '业务类型',biz_id VARCHAR(100) NOT NULL COMMENT '业务ID,如订单ID',node_code VARCHAR(50) NOT NULL COMMENT '处理节点编码,如扣库存',status TINYINT NOT NULL COMMENT '0待处理,1成功,2失败,3已补偿',execute_time DATETIME DEFAULT NULL COMMENT '执行时间',retry_count INT DEFAULT 0 COMMENT '重试次数',error_message VARCHAR(500) DEFAULT NULL COMMENT '错误详情',trace_id VARCHAR(100) DEFAULT NULL COMMENT '调用链追踪ID',created_at DATETIME NOT NULL,updated_at DATETIME NOT NULL,UNIQUE KEY uq_biz_node (biz_id, node_code)
);
技术要点:
-
biz_id + node_code联合唯一,保障同一业务节点只能处理一次(用于幂等校验); -
status表示处理状态(成功、失败、补偿中等); -
retry_count和error_message支持补偿调度与问题诊断; -
trace_id与链路追踪平台(如 Jaeger、Skywalking)结合; -
created_at/updated_at支持故障排查、超时监控。
🔁 三、结合事件驱动架构的典型处理流程
以订单创建业务为例(包含库存扣减、账户扣款、消息通知):
Step 1:主服务记录所有节点处理计划
订单服务 → 写入 3 条节点记录到 process_node_log:
- node_code = stock_freeze(冻结库存)
- node_code = balance_freeze(冻结余额)
- node_code = notify_user(用户通知)
Step 2:子服务消费消息时:
-
根据
biz_id + node_code查询记录; -
若无记录或状态=1,跳过(幂等);
-
执行业务逻辑;
-
成功后更新状态为1,失败记录错误信息、更新状态为2。
Step 3:定时补偿器定时轮询失败记录
-
执行失败节点的补偿操作;
-
成功后更新为状态3(补偿完成);
-
支持最大重试次数、失败告警通知。
🔁 四、补偿机制的工程实现建议
1. 补偿调度器(Compensator)
部署一个异步补偿调度器服务(可作为独立微服务或定时任务):
功能:
- 定时查询所有 status = 2 的处理记录;
- 通过 node_code 路由到对应的补偿逻辑;
- 自动执行补偿方法;
- 更新处理状态;
- 支持并发调度、分布式锁(避免重复补偿)。
2. 补偿接口规范(每个子服务都需实现)
所有具备幂等补偿能力的服务暴露统一接口,如:
POST /api/compensate
{"biz_id": "ORDER123456","node_code": "stock_freeze"
}
服务内部:
-
校验处理状态;
-
执行补偿逻辑(如库存解冻、余额释放);
-
返回补偿是否成功;
-
写入补偿日志(可与主日志复用或单独记录)。
🔐 五、技术注意事项
| 项目 | 建议 |
|---|---|
| 幂等设计 | 每个业务节点必须具备幂等执行能力:查询日志状态决定是否执行。 |
| 异常可视化 | 日志中记录完整错误栈,便于监控平台报警与开发排查。 |
| 分布式锁 | 补偿调度需使用 Redisson/Etcd/Zookeeper 控制并发(防重复补偿)。 |
| 审计合规 | 所有节点处理记录需具备追踪链路,满足审计要求。 |
| 调试工具 | 补偿平台建议支持人工触发/终止补偿任务,用于灰度、人工兜底。 |
🧠 六、总结观点:小事务架构中构建业务级事务日志系统
在小事务架构中,通过显式记录业务流程各节点状态,我们构建出一套业务级的“事务日志系统”,取代传统数据库事务机制,实现以下目标:
-
✅ 异步事件幂等控制;
-
✅ 节点级异常监控与诊断;
-
✅ 自动补偿调度与状态回退;
-
✅ 支持人工介入的可操作性平台;
-
✅ 全链路可追溯、可审计、可再现。
相关文章:
小事务架构下的业务完整性保障:基于业务处理记录与补偿机制的技术实现
随着微服务架构、事件驱动架构(EDA)和最终一致性理念的普及,传统的大事务管理方式被更细粒度的“小事务”所取代。在这种架构中,全局业务流程被拆解成多个局部事务节点,通过异步消息进行编排。这种解耦提高了可扩展性和…...
数智读书笔记系列029 《代数大脑:揭秘智能背后的逻辑》
《代数大脑:揭秘智能背后的逻辑》书籍简介 作者简介 加里F. 马库斯(Gary F. Marcus)是纽约大学心理学荣休教授、人工智能企业家,曾创立Geometric Intelligence(后被Uber收购)和Robust.AI公司。他在神经科学、语言学和人工智能领域发表了大量论文,并著有《重启AI》等多部…...
Apache Kafka UI :一款功能丰富且美观的 Kafka 开源管理平台!!
Apache Kafka UI 是一个免费的开源 Web UI,用于监控和管理 Apache Kafka 集群,可方便地查看 Kafka Brokers、Topics、消息、Consumer 等情况,支持多集群管理、性能监控、访问控制等功能。 1 特征 多集群管理: 在一个地方监控和管理…...
临床协调简历模板
模板信息 简历范文名称:临床协调简历模板,所属行业:其他 | 职位,模板编号:C1S3WO 专业的个人简历模板,逻辑清晰,排版简洁美观,让你的个人简历显得更专业,找到好工作。希…...
【第45节】windows程序的其他反调试手段上篇
目录 引言 一、通过窗口类名和窗口名判断 二、检测调试器进程 三、父进程是否是Explorer 四、RDTSC/GetTickCount时间敏感程序段 五、StartupInfo结构的使用 六、使用BeingDebugged字段 七、 PEB.NtGlobalFlag,Heap.HeapFlags,Heap.ForceFlags 八、DebugPort:CheckRem…...
Linux常见指令介绍上(入门级)
1. ls指令 功能:显示出当前目录下的所有子目录与文件。 PS:注意显示的是当前文件下的子目录与文件。 以下这些是可以和ls配套使用的一些选项 -a 列出目录下的所有文件,包括以 . 开头的隐含文件。 -d 将目录象文件一样显示,而不是显示其下…...
【版本控制】git命令使用大全
大家好,我是jstart千语。今天来总结一下git的使用命令,上文会先将git命令都列出来,便于快速寻找,然后还会对部分常用命令图文讲解,适合新手,让你快速地理解。最后还会总结在idea中使用git。如果有缺失的&am…...
新兴技术安全:物联网、区块链与人工智能的安全挑战与应对
目录 新兴技术安全:物联网、区块链与人工智能的安全挑战与应对 一、物联网安全:连接世界背后的安全隐忧 物联网架构安全 设备认证 数据安全 二、区块链安全:信任基石的安全考验 共识机制安全 智能合约安全 私钥管理 三、人工智能安…...
手阳明大肠经之合谷穴
个人主页:云纳星辰怀自在 座右铭:“所谓坚持,就是觉得还有希望!” 又名:1.《针灸甲乙经》:虎口。 所属经络:手阳明大肠经 定位 在手背,第1、2掌骨间,当第2掌骨桡侧的中点…...
【VUE3】练习项目——大事件后台管理
目录 0 前言 1 准备工作 1.1 安装pnpm 1.2 创建vue项目 1.3 Eslint & Prettier的配置 1.4 husky 提交代码检查 1.5 目录调整 1.6 VueRouter4 1.6.1 基础配置 1.6.2 路由跳转 1.7 引入 Element Plus 组件库 1.8 Pinia 1.8.1 优化 1.9 封装请求工具 1.9.1 安…...
kylin系统软件移植部署过程中遇到的问题及解决方案
有一个跨平台的c++软件,基于qt,boost,zmq,kafka等库,使用cmake脚本管理构建。在windows下和ubuntu下都能正常编译。在部署到kylin系统下时,遇到了一些问题。记录一下解决过程。 KYLIN 操作系统部署 c++开发环境: 安装了git,ninja,qt,boost等编译必要软件。因为之前…...
万字长篇————C语言指针学习汇总
经过一段时间的学习,我们已经接触到了C语言的很多知识了。不过目前我们接下来我们要接触C语言中一个最大的“门槛”:指针。 什么是指针? 在介绍指针之前,我们首先要明白变量与地址之间的关系。 举一个生活中的案例:一…...
实验一 HDFS的Shell操作
一、实验目的 熟悉HDFS Shell的语法格式,完成对HDFS上文件和目录的一系列操作 二、实验要求 2.1 练习dfs常用的子命令 ① -ls ② -du ③ -mv ④ -cp ⑤ -rm ⑥ -put ⑦ -cat ⑧ -help ⑨ -mkdir ⑩ -get 2.2通过Shell脚本定时采集数据到HDFS 三、实…...
复变函数摘记3
复变函数摘记3 5. 留数5.1 可去奇点、极点、本性奇点5.2 零点与极点的关系5.3 在无穷远点处的情形5.4 留数 5. 留数 \quad 如果函数 f ( z ) f(z) f(z) 在 z 0 z_0 z0 及 z 0 z_0 z0 的邻域内处处可导,那么称 f ( z ) f(z) f(z) 在点 z 0 z_0 z0 处解析。…...
【行测】判断推理:类比推理 and 定义判断
> 作者:დ旧言~ > 座右铭:读不在三更五鼓,功只怕一曝十寒。 > 目标:掌握 类比推理 and 定义判断 基本题型,并能运用到例题中。 > 毒鸡汤:有些事情,总是不明白,所以我不会…...
Java使用WebSocket视频拆帧进度处理与拆帧图片推送,结合Apipost进行调试
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-websocket</artifactId></dependency>Configuration public class WebSocketConfig {/*** 启动 WebSocket 服务器*/Beanpublic ServerEndpointE…...
计算斐波那契数列
1.对于斐波那契数列的理解: (1)常规 该数列由兔子繁衍的想法产生,故又“兔子数列” 其数值为:1、1、2、3、5、8、13、21、34 从数学定义上走:F(0)1,F(1)1, F(n)F(n - 1)F(n - 2)(n ≥ 2,n ∈…...
JAVA如何操作文件?(超级详细)
目录 一、认识文件和相关知识 1.认识文件 2.⽬录 3.⽂件路径(Path) 4.文本文件和二进制文件的区分 二、File类操作文件 1.构造方法 2.方法 2.1 方法表 2.2 get相关的方法和构造方法 2.2.1 “.” 和 “..” 2.3 is相关的方法 2.4 删除相关…...
(2)VTK C++开发示例 --- 绘制多面锥体
文章目录 1. 概述2. CMake链接VTK3. main.cpp文件4. 演示效果 更多精彩内容👉内容导航 👈👉VTK开发 👈 1. 概述 VTK C开发示例程序; 使用C 和VTK绘制一个多面锥体。 环境说明系统ubuntu22.04、windows11cmake3.22、3.2…...
(2025-04-12)向老主机箱中安装新买的显卡及固态硬盘
目录 1 引言2 显卡及其驱动的安装3 固态硬盘的安装及C盘扩容3.1 固态硬盘正确连接到主板上后,操作系统上面仍然不显示对应盘符怎么办?3.2 如何对C盘扩容?3.3 新问题:原有D盘程序不能运行 4 总结 1 引言 今天安装昨天买的新固态硬…...
rk3588 驱动开发(一)字符设备开发
3.字符设备驱动开发 3.1 什么是字符设备驱动 字符设备:就是一个个字节,按照字节流进行读写操作的设备,读写是按照先后顺序的。 举例子:IIC 按键 LED SPI LCD 等 Linux 应用程序调用驱动程序流程: Linux中驱动加载成功…...
AbMole| 体内相互作用筛选揭示肝脏对癌症转移的限制
癌症转移,作为导致患者死亡的主要原因之一,其复杂机制一直是医学界研究的热点。肝脏,作为癌症转移的常见靶器官,其微环境对癌症细胞的生长和转移具有重要影响。然而,肝脏如何限制癌症转移的具体机制尚不完全清楚。 来…...
STM32移植文件系统FATFS——片外SPI FLASH
一、电路连接 主控芯片选型为:STM32F407ZGT6,SPI FLASH选型为:W25Q256JV。 采用了两片32MB的片外SPI FLASH,电路如图所示。 SPI FLASH与主控芯片的连接方式如表所示。 STM32F407GT6W25Q256JVPB3SPI1_SCKPB4SPI1_MISOPB5SPI1_MOSI…...
2025年第十六届蓝桥杯省赛JavaB组真题回顾
第16届蓝桥杯省赛已经结束了,第一次参加也是坐牢了4个小时,现在还是来总结一下吧(先声明以下的解法,大家可以当作一种思路来看,解法不一定是正解,只是给大家提供一种能够正常想到的思路吧) 试题…...
Android 接口定义语言 (AIDL)
目录 1. 本地进程调用(同一进程内)2. 远程进程调用(跨进程)3 `oneway` 关键字用于修改远程调用的行为Android 接口定义语言 (AIDL) 与其他 IDL 类似: 你可以利用它定义客户端与服务均认可的编程接口,以便二者使用进程间通信 (IPC) 进行相互通信。 在 Android 上,一个进…...
c# 数据结构 链表篇 有关双向链表的一切
本人能力有限,如有不足还请斧正 目录 0.双向链表的好处 1.双向链表的分类 2.不带头节点的标准双向链表 节点类:有头有尾 链表类:也可以有头有尾 也可以只有头 增 头插 尾插 删 查 改 遍历 全部代码 3.循环双向链表 节点类 链表类 增 头插 尾插 删 查 遍历…...
Debian服务器挂载外部存储设备的完整指南
在 Debian 系统中挂载外部存储设备(如 U 盘、移动硬盘、SSD)是服务器运维和桌面使用中非常常见的操作。本文将为你详细拆解从识别设备、格式化到手动/自动挂载的全过程,适合新手到进阶用户参考。 一、准备阶段:插入存储设备并识别 1. 插入外部设备后查看…...
660 中值定理
文章目录 前言168169170总结 前言 background music: 《代替》 张叶蕾 660 上面没有专门的中值定理章节,我蒙了。不过应该可以找一下。就是证明题,标志性应该还行。找一下。然后做一下。660 的题质量应该还是非常高的。但是积分中值定理,还有…...
Elasticsearch:AI 助理 - 从通才到专才
作者:来自 Elastic Thorben Jndling 在 AI 世界中,关于构建针对特定领域定制的大型语言模型(large language models - LLM)的话题备受关注 —— 不论是为了更好的安全性、上下文理解、专业能力,还是更高的准确率。这个…...
数据结构——布隆过滤器
目录 一、什么是布隆过滤器? 二、布隆过滤器的原理 三、布隆过滤器的特点 一、什么是布隆过滤器? 布隆过滤器是一种空间效率高、适合快速检索的数据结构,用于判断一个元素是否可能存在于一个集合中。它通过使用多个哈希函数和一个位数组来…...
