当前位置: 首页 > article >正文

MyBatis-Plus逻辑删除的‘后遗症’:自定义SQL查询全量数据怎么办?附两种修复方案

MyBatis-Plus逻辑删除的隐秘陷阱自定义SQL查询全量数据的深度解决方案1. 逻辑删除的优雅与隐患在数据持久层设计中逻辑删除一直是个让人又爱又恨的特性。它通过标记字段替代物理删除保留了数据可追溯性避免了外键约束等问题。MyBatis-Plus以下简称MP将其封装得如此简洁只需一个注解就能自动过滤已删除数据TableLogic(value 1, delval 0) private Integer isDeleted;配置完成后所有通过MP内置方法进行的CRUD操作都会自动带上is_deleted0条件。这种设计让开发者误以为逻辑删除已经一劳永逸直到他们在复杂业务场景中编写自定义SQL时突然发现-- 预期只查询有效数据 -- 实际全量数据泄露 SELECT * FROM user JOIN orders ON user.id orders.user_id这个看似简单的设计实则暗藏玄机。MP的逻辑删除过滤仅作用于框架生成的SQL对开发者自定义的SQL完全透明。当项目中出现以下场景时问题会集中爆发多表关联查询分组统计报表复杂子查询存储过程调用更棘手的是这类问题往往在测试环境难以发现——因为测试数据量小开发人员很少执行逻辑删除操作。等到生产环境运行一段时间后系统可能已经输出了大量包含无效数据的报表造成业务决策偏差。2. 问题本质解析与技术内幕要彻底解决这个问题我们需要深入理解MP的实现机制。逻辑删除的自动过滤发生在MP的SQL解析阶段具体流程如下SQL生成阶段当调用selectList()等方法时MP会通过AbstractWrapper构建条件逻辑删除拦截LogicSqlInjector在SQL中自动追加WHERE is_deleted0条件SQL执行阶段最终生成的SQL语句发送到数据库执行关键点在于只有通过MP的QueryWrapper/LambdaQueryWrapper构建的查询才会触发这个机制。对于以下两种自定义SQL方式过滤条件都会失效// 方式1XML映射文件中的SQL select idfindComplexData resultType... SELECT * FROM table1 t1 JOIN table2 t2 ON t1.id t2.ref_id /select // 方式2注解方式的自定义SQL Select(SELECT * FROM user WHERE age #{minAge}) ListUser findAdults(Param(minAge) int minAge);这种设计其实有其合理性——MP无法确定开发者在复杂SQL中的真实意图。有些场景确实需要查询已删除数据如回收站功能框架不应该过度干预。3. 解决方案一手动注入过滤条件最直接的解决方式是在所有自定义SQL中显式添加删除状态条件。根据SQL编写方式的不同具体实现也有所差异。3.1 XML映射文件方案对于使用XML配置的SQL只需在WHERE子句中添加条件select idfindActiveUsers resultTypeUser SELECT u.*, d.department_name FROM user u LEFT JOIN department d ON u.dept_id d.id WHERE u.is_deleted 0 if testdeptId ! null AND u.dept_id #{deptId} /if /select注意事项在多表关联时需要为每个支持逻辑删除的表添加条件对于LEFT JOIN被关联表的删除条件应该放在ON子句中SELECT u.*, d.department_name FROM user u LEFT JOIN department d ON u.dept_id d.id AND d.is_deleted 0 WHERE u.is_deleted 03.2 注解方案优化使用Select注解时可以通过模板变量保持代码整洁Select(SELECT * FROM user WHERE is_deleted 0 AND ${ew.customSqlSegment}) ListUser selectActiveList(Param(Constants.WRAPPER) WrapperUser wrapper);提示建议创建一个BaseMapper接口统一这些模板方法避免每个Mapper重复定义4. 解决方案二Wrapper条件构造器集成对于已经大量使用Wrapper的项目可以保持代码风格统一让MP自动注入条件。这种方法尤其适合动态查询场景。4.1 基本集成模式public ListUser findUsers(QueryWrapperUser wrapper) { // 确保不覆盖现有条件 wrapper.eq(User::getIsDeleted, 0); return userMapper.selectList(wrapper); }对于自定义方法可以通过Param(Constants.WRAPPER)参数Select(SELECT * FROM user ${ew.customSqlSegment}) ListUser selectByWrapper(Param(Constants.WRAPPER) WrapperUser wrapper); // 调用示例 ListUser users userMapper.selectByWrapper( Wrappers.Userquery() .eq(status, 1) // 不需要显式添加is_deleted条件 );4.2 高级封装技巧我们可以创建装饰器Wrapper自动注入逻辑删除条件public class SafeQueryWrapperT extends QueryWrapperT { Override public QueryWrapperT eq(boolean condition, String column, Object val) { if (is_deleted.equals(column)) { throw new IllegalArgumentException(不允许修改逻辑删除条件); } return super.eq(condition, column, val); } public QueryWrapperT safe() { return this.eq(is_deleted, 0); } } // 使用示例 ListUser users userMapper.selectList( new SafeQueryWrapperUser() .like(name, 张) .safe() );5. 工程化解决方案与最佳实践在大型项目中我们需要系统性地解决这个问题而不是到处打补丁。以下是几种经过验证的架构方案。5.1 AOP统一处理通过切面自动为所有Mapper方法添加条件Aspect Component public class LogicDeleteAspect { Around(execution(* com..mapper.*.*(..)) args(wrapper,..)) public Object aroundQuery(ProceedingJoinPoint pjp, Wrapper? wrapper) throws Throwable { if (wrapper ! null) { // 反射获取entityClass Class? entityClass getEntityClass(wrapper); TableLogic tableLogic getTableLogicAnnotation(entityClass); if (tableLogic ! null) { wrapper.eq(getLogicDeleteColumn(entityClass), tableLogic.value()); } } return pjp.proceed(); } }5.2 自定义SQL拦截器更底层的解决方案是扩展MP的SQL解析过程public class LogicDeleteInterceptor implements Interceptor { Override public Object intercept(Invocation invocation) throws Throwable { // 解析原始SQL String originalSql getSql(invocation); // 识别查询语句且不含逻辑删除条件 if (isSelectSql(originalSql) !containsLogicDelete(originalSql)) { String newSql injectLogicDelete(originalSql); resetSql(invocation, newSql); } return invocation.proceed(); } }5.3 代码规范与检查建立严格的代码审查机制静态代码扫描通过SonarQube等工具检测自定义SQL单元测试规范要求所有数据访问测试包含逻辑删除用例架构守护使用ArchUnit确保Mapper接口规范ArchTest public static final ArchRule no_raw_sql_in_mapper noMethods() .that().areDeclaredInClassesThat().resideInAPackage(..mapper..) .should().callMethodWhere(JavaMethod.Predicates.nameContains(execute)) .orShould().callMethodWhere(JavaMethod.Predicates.nameContains(queryForList));6. 特殊场景处理与边界情况即使采用了上述方案某些复杂场景仍需特别注意。6.1 联表查询的陷阱在多表关联时容易遗漏关联表的逻辑删除条件-- 错误示例只过滤了主表 SELECT a.*, b.name FROM order a JOIN user b ON a.user_id b.id WHERE a.is_deleted 0 -- 正确写法 SELECT a.*, b.name FROM order a JOIN user b ON a.user_id b.id AND b.is_deleted 0 WHERE a.is_deleted 06.2 统计查询的注意事项进行COUNT、SUM等统计时要明确业务需求-- 统计所有历史订单包含已删除的 SELECT COUNT(*) FROM order -- 统计有效订单 SELECT COUNT(*) FROM order WHERE is_deleted 06.3 事务与数据一致性在事务中混合逻辑删除和物理操作时要特别小心Transactional public void transferData(Long sourceId, Long targetId) { // 逻辑删除源数据 sourceMapper.deleteById(sourceId); // 如果此处抛出异常... someService.process(targetId); // 需要确保不会因为回滚导致数据既不在源表也不在目标表 }7. 性能优化与索引策略不当的逻辑删除实现可能导致严重性能问题以下是关键优化点索引设计确保逻辑删除字段包含在复合索引中-- 优化前 ALTER TABLE order ADD INDEX idx_status (status); -- 优化后 ALTER TABLE order ADD INDEX idx_status_del (status, is_deleted);查询重构避免对已删除数据的大表扫描-- 低效 SELECT * FROM history_log WHERE create_time 2023-01-01; -- 高效 SELECT * FROM history_log WHERE create_time 2023-01-01 AND is_deleted 0;归档策略对已删除且无需保留的数据定期归档到历史表策略执行频率影响范围恢复难度纯逻辑删除实时单条记录容易逻辑删除归档定期任务批量数据中等物理删除实时不可逆困难8. 监控与治理体系建立完善的监控机制及时发现逻辑删除相关问题SQL审计监控生产环境SQL捕获缺失逻辑删除条件的查询数据质量检查定期验证报表数据的有效性性能监控关注包含逻辑删除字段的查询性能// 示例通过MyBatis插件记录问题SQL Intercepts({ Signature(type StatementHandler.class, methodquery, args{Statement.class, ResultHandler.class}) }) public class SqlMonitorPlugin implements Interceptor { Override public Object intercept(Invocation invocation) throws Throwable { String sql ((Statement) invocation.getArgs()[0]).toString(); if (isDangerousSelect(sql)) { log.warn(Potential missing logic-delete condition: {}, sql); metrics.counter(unsafe_query).increment(); } return invocation.proceed(); } }在三年多的企业级项目实践中我们发现逻辑删除问题最常出现在新接手的老代码库中。有个典型案例某财务系统每月生成的报表总是包含已注销账户的数据导致对账差异。问题的根源竟是三年前某个开发人员在存储过程中遗漏了删除条件。这个教训让我们建立了严格的SQL审查流程所有数据访问代码必须包含逻辑删除测试用例。

相关文章:

MyBatis-Plus逻辑删除的‘后遗症’:自定义SQL查询全量数据怎么办?附两种修复方案

MyBatis-Plus逻辑删除的隐秘陷阱:自定义SQL查询全量数据的深度解决方案 1. 逻辑删除的优雅与隐患 在数据持久层设计中,逻辑删除一直是个让人又爱又恨的特性。它通过标记字段替代物理删除,保留了数据可追溯性,避免了外键约束等问题…...

快速提升中文文献管理效率:Jasminum插件终极完整指南

快速提升中文文献管理效率:Jasminum插件终极完整指南 【免费下载链接】jasminum A Zotero add-on to retrive CNKI meta data. 一个简单的Zotero 插件,用于识别中文元数据 项目地址: https://gitcode.com/gh_mirrors/ja/jasminum 你知道吗&#x…...

告别命令行!用LM Studio在Windows上零门槛玩转Qwen3-7B-Instruct大模型

告别命令行!用LM Studio在Windows上零门槛玩转Qwen3-7B-Instruct大模型 每次看到技术论坛里讨论本地部署大模型,总少不了"先装Python环境"、"输入这行命令"、"修改配置文件"这样的操作指南。对于习惯图形化操作的用户来说…...

ChatGPT和DeepSeek中如何保留原始Markdown?HTML注释法实测有效

ChatGPT和DeepSeek中保留原始Markdown的HTML注释法实战指南 当技术写作者需要从AI对话中获取原始Markdown源码时,常常会遇到一个恼人的问题:AI平台会自动渲染Markdown内容,导致我们无法直接获取带有完整标记符号的原始文本。这种情况在编写技…...

GNSS定位质量分析实战:如何利用PPP-B2b提升GPS/BDS的PDOP与可视卫星数?

GNSS定位质量优化实战:PPP-B2b如何重塑多系统联合定位性能 当高精度定位成为自动驾驶、精准农业和地质监测等领域的基础需求时,GNSS系统的性能优化便成为工程师们必须面对的课题。北斗三号全球系统新增的PPP-B2b服务,为亚太区域用户提供了开…...

DLSS智能管理终极指南:如何快速提升游戏性能的完整解决方案

DLSS智能管理终极指南:如何快速提升游戏性能的完整解决方案 【免费下载链接】dlss-swapper 项目地址: https://gitcode.com/GitHub_Trending/dl/dlss-swapper 你是否厌倦了手动管理游戏中的DLSS文件?当你想尝试新版本DLSS提升帧率时,…...

智能合约的形式化验证与安全漏洞静态分析

智能合约的形式化验证与安全漏洞静态分析 随着区块链技术的快速发展,智能合约作为去中心化应用的核心组件,其安全性至关重要。由于智能合约一旦部署便难以修改,且涉及高价值的数字资产,任何漏洞都可能导致严重的经济损失。形式化…...

uniapp H5 项目实战:集成mui-player实现HLS监控视频流的流畅播放与异常处理

1. 为什么选择mui-player处理HLS监控视频流 在开发监控类H5应用时,视频流的稳定播放是个硬需求。我去年接手过一个智慧园区项目,需要在uniapp里实现多路监控画面的低延迟展示。当时测试了五六种播放方案,最终mui-player以92%的首帧打开率和自…...

C++ 社区内部大讨论:新特性到底是“生产力革命”,还是“叠加的复杂性”?

大家好,我是Tony Bai。如果你把编程语言比作工具,Go 是一把极简的手术刀,精准且克制;Rust 是一套带智能传感器的外骨骼装甲,严苛且安全。而 C 呢?它更像是一把在过去四十年里不断被加挂零件的、超重型复合瑞…...

XUnity自动翻译器终极指南:3步让任何Unity游戏变身中文版

XUnity自动翻译器终极指南:3步让任何Unity游戏变身中文版 【免费下载链接】XUnity.AutoTranslator 项目地址: https://gitcode.com/gh_mirrors/xu/XUnity.AutoTranslator 还在为外语游戏的语言障碍而烦恼吗?想玩日文RPG却看不懂剧情?…...

PyQt5实战——高效管理layout布局中的动态控件(附完整解决方案)

1. 为什么动态管理PyQt5布局这么麻烦? 第一次用PyQt5做动态界面时,我踩过一个典型坑:点击"刷新"按钮后,旧控件没消失,新控件叠在上面,界面直接乱成一锅粥。后来才发现,PyQt5的layout管…...

从‘拉取算法仓库’到‘部署前端项目’:`git clone --depth=1` 在不同开发场景下的实战指南

从‘拉取算法仓库’到‘部署前端项目’:git clone --depth1 在不同开发场景下的实战指南 在快节奏的开发环境中,时间就是生产力。当你需要快速浏览一个大型开源项目的代码,或是优化CI/CD管道的构建速度,亦或是部署前端项目时&…...

魔兽争霸3终极助手:WarcraftHelper全版本完美兼容指南

魔兽争霸3终极助手:WarcraftHelper全版本完美兼容指南 【免费下载链接】WarcraftHelper Warcraft III Helper , support 1.20e, 1.24e, 1.26a, 1.27a, 1.27b 项目地址: https://gitcode.com/gh_mirrors/wa/WarcraftHelper WarcraftHelper是魔兽争霸3玩家的终…...

LIN协议|ISO 17987 1-8测试工程师实战指南:从标准解读到精准测试

1. LIN协议与ISO 17987标准全景解读 第一次接触LIN总线测试时,我被各种专业术语和标准文档绕得头晕。直到把ISO 17987标准拆解成具体操作步骤,才发现这份文档其实是测试工程师的"藏宝图"。LIN(Local Interconnect Network&#xf…...

OpenCore Configurator:5个简单步骤让黑苹果配置变得如此轻松

OpenCore Configurator:5个简单步骤让黑苹果配置变得如此轻松 【免费下载链接】OpenCore-Configurator A configurator for the OpenCore Bootloader 项目地址: https://gitcode.com/gh_mirrors/op/OpenCore-Configurator 还在为复杂的OpenCore配置文件而头疼…...

告别Keil卡顿!用CLion 2025.1 + STM32CubeCLT搭建丝滑的STM32开发环境(保姆级避坑)

从Keil到CLion:打造高效STM32开发环境的终极指南 为什么嵌入式开发者需要现代化工具链 如果你是一位长期使用Keil进行STM32开发的工程师,可能已经习惯了它的各种不便——缓慢的代码补全、陈旧的用户界面、有限的跨平台支持。但时代在进步,J…...

复旦微Procise安装避坑指南:从License校验到环境配置的完整实战

1. 复旦微Procise安装失败的典型场景 第一次安装复旦微Procise工具时,很多开发者都会遇到一个令人抓狂的问题:明明按照官方文档一步步操作,却在最后启动时弹出一个莫名其妙的错误提示,更糟的是license文件还会自动消失。这种情况…...

别再死记硬背真值表了!用74LC74双D触发器做个实用按键消抖电路(附Arduino联动玩法)

用74LC74双D触发器打造工业级按键消抖方案:从电路设计到Arduino实战 在嵌入式开发中,机械按键的抖动问题就像一位不请自来的捣蛋鬼——当你按下按键时,它会在几毫秒内产生数十次通断信号,导致单片机误判多次触发。传统软件消抖虽然…...

不止于画图:深入解读GMT6光照参数(-I),让你的地形图更具立体感和专业范儿

不止于画图:深入解读GMT6光照参数(-I),让你的地形图更具立体感和专业范儿 第一次用GMT绘制地形图时,那种从二维数据中召唤出山川起伏的成就感令人难忘。但当我把成果图发给导师审阅时,他指着阿尔卑斯山脉的阴影说:&quo…...

Nginx HTTPS 反向代理 Nextcloud 后移动端 App 连接失败的排查与修复

1. 问题现象与初步排查 最近在帮朋友部署Nextcloud私有云时遇到一个典型问题:当通过Nginx配置HTTPS反向代理后,桌面端网页访问一切正常,但移动端App却死活连不上服务器。具体表现为App反复提示"无法连接到服务器"或"连接超时…...

[CentOS]无网络环境下高效部署gcc/gcc-c++全攻略

1. 无网络环境下部署gcc/gcc-c的挑战与解决方案 想象一下,你接手了一台完全离线的CentOS服务器,领导要求你在上面搭建C/C开发环境。没有网络连接,没有yum源,甚至连个U盘接口都没有——这就是我们今天要面对的真实场景。我在金融行…...

企业级安防平台实战:用Docker容器化部署海康iSecure Center(CentOS版)

企业级安防平台容器化实践:基于Docker的海康iSecure Center部署指南 在数字化转型浪潮中,企业安防系统的敏捷部署与弹性扩展能力已成为关键竞争力。传统物理机部署方式面临资源利用率低、环境依赖性强、迁移困难等痛点,而容器化技术为综合安防…...

Diablo Edit2:终极暗黑破坏神II角色编辑器,3大核心功能重塑单机游戏体验

Diablo Edit2:终极暗黑破坏神II角色编辑器,3大核心功能重塑单机游戏体验 【免费下载链接】diablo_edit Diablo II Character editor. 项目地址: https://gitcode.com/gh_mirrors/di/diablo_edit 在暗黑破坏神II的单机冒险中,你是否曾为…...

3步构建金融数据自动化系统:PyWenCai实战指南

3步构建金融数据自动化系统:PyWenCai实战指南 【免费下载链接】pywencai 获取同花顺问财数据 项目地址: https://gitcode.com/gh_mirrors/py/pywencai 在量化投资和金融数据分析领域,高效获取准确的市场数据是成功的关键。传统的手工数据收集方式…...

番茄小说下载器:一款强大的Rust开发离线阅读解决方案

番茄小说下载器:一款强大的Rust开发离线阅读解决方案 【免费下载链接】Tomato-Novel-Downloader 番茄小说下载器不精简版 项目地址: https://gitcode.com/gh_mirrors/to/Tomato-Novel-Downloader 在数字阅读时代,你是否遇到过网络不稳定导致阅读中…...

nnUNetv2实战避坑指南:从零到一的医学影像分割全流程

1. 环境配置与nnUNetv2安装 第一次接触nnUNetv2时,最让人头疼的就是环境配置。作为医学影像分割领域的标杆框架,它对Python和PyTorch版本有着严格的要求。我租用的是RTX4090云服务器,这里分享几个关键避坑点: 首先是Python版本选择…...

别再为谐波发愁了!手把手教你用MATLAB搞定三相并网逆变器的LCL滤波器设计(附20kW实例参数)

三相并网逆变器LCL滤波器MATLAB实战:从理论到20kW实例验证 当你在实验室调试一台20kW三相并网逆变器时,示波器上那些不规则的电流波形是否曾让你彻夜难眠?LCL滤波器作为并网逆变器的"守门人",其参数设计直接决定了系统稳…...

避坑指南:ESP8266连接腾讯云物联网平台的7个常见错误及解决方法

ESP8266连接腾讯云物联网平台的7个实战避坑指南 1. 三元组配置:那些容易被忽略的细节 在ESP8266连接腾讯云物联网平台时,设备三元组(ProductID、DeviceName、DeviceSecret)的配置错误占据了连接失败案例的47%。很多开发者容易犯以…...

从手机‘无损放大’到AI修老照片:聊聊上采样技术在我们身边的那些‘神奇’应用

从手机‘无损放大’到AI修老照片:上采样技术如何重塑我们的视觉体验 每次翻看老照片时,你是否也幻想过能像科幻电影那样轻轻一点就让模糊的影像变得清晰?如今这个魔法已经走进现实——当你用手机相册的"超清画质"功能修复旧照&…...

Qwen3-14B C语言教学助手:从语法学习到项目调试全程指导

Qwen3-14B C语言教学助手:从语法学习到项目调试全程指导 1. 为什么需要智能C语言学习助手 学习C语言就像第一次学骑自行车——看起来简单,但真正上手时才发现平衡、转向、刹车都需要协调。特别是面对指针和内存管理这些概念时,很多初学者就…...