当前位置: 首页 > article >正文

MyBatis批量更新避坑指南:从`<foreach>`拼接SQL到`allowMultiQueries`配置的完整流程

MyBatis批量更新实战从基础实现到性能调优全解析批量更新操作是后端开发中绕不开的高频需求但很多开发者在初次接触MyBatis批量更新时往往会陷入各种坑中。本文将带你系统掌握两种主流实现方案从基础用法到性能优化彻底解决批量更新的难题。1. 批量更新的核心挑战与解决方案数据库批量更新看似简单实则暗藏玄机。我们先来看一个典型场景假设有个电商系统需要同时更新1000件商品的价格如果采用循环执行单条update语句的方式会产生1000次网络IO和数据库事务开销这种做法的性能瓶颈显而易见。MyBatis提供了两种主流解决方案多语句拼接方案通过foreach标签拼接多条update语句需要开启allowMultiQueries参数CASE WHEN方案利用SQL的CASE WHEN语法构造单条复杂update语句这两种方案各有优劣我们通过一个性能对比表格直观感受方案类型适用场景优点缺点平均耗时(1000条)多语句拼接字段更新差异大、数据量中等实现简单、灵活性高需要特殊配置、SQL注入风险1200msCASE WHEN字段更新规则统一、大数据量单次执行、无需特殊配置SQL复杂度高、可读性差800ms实际项目中我们还需要考虑事务管理、连接池配置等因素。比如在使用HikariCP连接池时合理的配置可以显著提升批量操作性能# HikariCP推荐配置 spring.datasource.hikari.maximum-pool-size20 spring.datasource.hikari.minimum-idle5 spring.datasource.hikari.idle-timeout300002. 多语句拼接方案详解这种方案的核心是通过MyBatis的foreach标签动态生成多条update语句。先看一个典型实现update idupdateBatch parameterTypejava.util.List foreach collectionlist itemitem separator; UPDATE products SET price #{item.price}, stock #{item.stock} WHERE id #{item.id} /foreach /update要使这种方案正常工作必须在数据库连接URL中添加allowMultiQueriestrue参数spring.datasource.urljdbc:mysql://localhost:3306/db?allowMultiQueriestrue常见问题排查指南SQL语法错误确保每条语句以分号结尾且标签正确闭合参数绑定失败检查parameterType是否正确指定为List权限问题确认数据库用户有执行多语句的权限SQL注入风险避免直接拼接用户输入使用#{}预编译安全提示开启allowMultiQueries会增加SQL注入风险应确保所有输入参数都经过严格校验性能优化方面可以考虑分批执行。比如每500条数据作为一个批次public void batchUpdate(ListProduct products) { int batchSize 500; for (int i 0; i products.size(); i batchSize) { ListProduct batch products.subList(i, Math.min(i batchSize, products.size())); productMapper.updateBatch(batch); } }3. CASE WHEN方案深度解析CASE WHEN方案通过构造复杂的条件更新语句实现批量操作其基本语法结构如下UPDATE table_name SET column1 CASE WHEN id 1 THEN value1 WHEN id 2 THEN value2 ELSE column1 END WHERE id IN (1, 2)在MyBatis中的实现相对复杂但更具灵活性。下面是一个支持动态字段更新的增强版实现update idupdateBatch parameterTypejava.util.List UPDATE products trim prefixSET suffixOverrides, trim prefixpriceCASE suffixEND, foreach collectionlist itemitem if testitem.price ! null WHEN id#{item.id} THEN #{item.price} /if /foreach /trim trim prefixstockCASE suffixEND, foreach collectionlist itemitem if testitem.stock ! null WHEN id#{item.id} THEN #{item.stock} /if /foreach /trim /trim WHERE id IN foreach collectionlist itemitem open( separator, close) #{item.id} /foreach /update这种方案的几个高级用法值得关注条件更新通过if标签实现只更新非空字段保留原值添加ELSE子句可保留不符合条件的记录原值多字段联动可以在一个CASE WHEN中处理多个字段的逻辑关系性能测试数据显示在更新1万条记录时CASE WHEN方案比多语句方案快约40%且内存占用更低。4. 实战中的进阶技巧掌握了基础用法后我们来看几个提升生产力的实战技巧。动态表名更新有时候我们需要根据条件更新不同的表可以通过参数传递表名update iddynamicTableUpdate UPDATE ${tableName} SET status #{status} WHERE id IN foreach collectionids itemid open( separator, close) #{id} /foreach /update批量更新与版本控制结合乐观锁实现并发安全update idupdateWithVersion UPDATE products SET price #{price}, version version 1 WHERE id #{id} AND version #{version} /update存储过程方案对于超大规模数据更新可以考虑使用存储过程CREATE PROCEDURE batch_update_products( IN ids TEXT, IN prices TEXT ) BEGIN -- 实现逻辑 END在Spring中调用存储过程Procedure(batch_update_products) void batchUpdateProducts(Param(ids) String ids, Param(prices) String prices);5. 性能优化与监控批量更新的性能受多种因素影响我们需要建立完整的优化和监控方案。关键性能指标执行时间锁等待时间事务提交耗时网络往返时间优化建议合理设置批次大小通常500-2000条/批使用连接池并优化配置在低峰期执行大批量更新考虑使用读写分离架构监控方面可以集成Prometheus和GrafanaTimed(value batch.update.time, description Time spent processing batch update) public void batchUpdate(ListItem items) { // 实现逻辑 }日志记录也很重要建议采用结构化日志private static final Logger logger LoggerFactory.getLogger(batch); logger.info(Batch update started, kv(batchSize, items.size()), kv(thread, Thread.currentThread().getName()));6. 不同场景下的方案选型经过前文的详细探讨我们可以总结出以下选型建议中小规模数据1万条字段更新规则复杂 → 多语句拼接方案字段更新规则简单 → CASE WHEN方案大规模数据1万条考虑分批执行评估使用临时表方案极端情况下采用ETL工具特殊需求场景需要原子性保证 → 事务多语句需要部分成功 → 无事务或补偿机制超大数据量 → 考虑异步处理最后提醒一点无论采用哪种方案都应该在测试环境充分验证特别是要模拟生产环境的数据量和并发情况。我在实际项目中遇到过开发环境运行良好的批量更新在生产环境却导致数据库连接耗尽的情况根本原因是测试数据量不足。

相关文章:

MyBatis批量更新避坑指南:从`<foreach>`拼接SQL到`allowMultiQueries`配置的完整流程

MyBatis批量更新实战:从基础实现到性能调优全解析 批量更新操作是后端开发中绕不开的高频需求,但很多开发者在初次接触MyBatis批量更新时,往往会陷入各种"坑"中。本文将带你系统掌握两种主流实现方案,从基础用法到性能优…...

Windows右键菜单效率革命:ContextMenuManager极简操作与深度定制指南

Windows右键菜单效率革命:ContextMenuManager极简操作与深度定制指南 【免费下载链接】ContextMenuManager 🖱️ 纯粹的Windows右键菜单管理程序 项目地址: https://gitcode.com/gh_mirrors/co/ContextMenuManager 每天面对电脑上杂乱的右键菜单&…...

手把手教你为OpenBMC (AST2600平台) 正确配置PCA9545 I2C Switch的DTS节点

深入解析AST2600平台PCA9545 I2C Switch设备树配置实战指南 在嵌入式系统开发中,I2C总线扩展是连接多个外设的常见需求。NXP的PCA9545作为一款4通道I2C总线开关芯片,能够有效解决I2C地址冲突问题,但在实际应用中,设备树(DTS)配置…...

VSCode + WSL-Ubuntu 20.04 开发环境配置:从零搭建C++开发环境(含Clangd智能补全)

VSCode WSL-Ubuntu 20.04 开发环境配置:从零搭建C开发环境(含Clangd智能补全) 在跨平台开发日益普及的今天,微软推出的WSL(Windows Subsystem for Linux)为Windows开发者提供了无缝的Linux开发体验。结合…...

【花雕学编程】Arduino BLDC 之使用互补滤波进行姿态控制的机器人

从专业工程视角来看,基于Arduino、使用互补滤波进行姿态控制的BLDC(无刷直流电机)机器人,是一个典型的嵌入式实时闭环控制系统。它集成了传感器数据融合、控制算法和电机驱动,广泛应用于对姿态稳定性有要求的场景。 1、…...

SystemVerilog实战:在Vivado 2023.1中实现跨文件clog2计算的3种方法

SystemVerilog实战:在Vivado 2023.1中实现跨文件clog2计算的3种方法 当我们将传统Verilog项目迁移到SystemVerilog环境时,经常会遇到$clog2函数的兼容性问题。这个看似简单的对数计算函数,在不同工具链和文件类型中的表现可能大相径庭。特别是…...

CodeMaker:让编码效率提升3倍的智能代码生成工具

CodeMaker:让编码效率提升3倍的智能代码生成工具 【免费下载链接】CodeMaker A idea-plugin for Java/Scala, support custom code template. 项目地址: https://gitcode.com/gh_mirrors/co/CodeMaker 一、核心价值:重新定义开发效率 你是否也曾…...

初学Java之范型

范型包装类包装类的定义包装类的作用场景1:我想把数字放进列表里场景2:我想让方法返回"没有结果"场景3:我想用工具类处理数字场景4:泛型方法要求对象类型场景5:我想在同步代码块里用数字作为锁装箱与拆箱定义…...

bilibili-downloader开源工具:突破B站4K视频下载限制的全攻略

bilibili-downloader开源工具:突破B站4K视频下载限制的全攻略 【免费下载链接】bilibili-downloader B站视频下载,支持下载大会员清晰度4K,持续更新中 项目地址: https://gitcode.com/gh_mirrors/bil/bilibili-downloader 在数字内容消…...

颠覆中文字体困境:思源宋体CN 7字重开源方案深度解析

颠覆中文字体困境:思源宋体CN 7字重开源方案深度解析 【免费下载链接】source-han-serif-ttf Source Han Serif TTF 项目地址: https://gitcode.com/gh_mirrors/so/source-han-serif-ttf 价值主张:破解中文字体的"三重枷锁" 在数字设计…...

5个步骤彻底修复Windows更新问题:Reset Windows Update Tool完整指南

5个步骤彻底修复Windows更新问题:Reset Windows Update Tool完整指南 【免费下载链接】Reset-Windows-Update-Tool Troubleshooting Tool with Windows Updates (Developed in Dev-C). 项目地址: https://gitcode.com/gh_mirrors/re/Reset-Windows-Update-Tool …...

小爱音响音乐服务:如何让智能音箱变身私人音乐管家?

小爱音响音乐服务:如何让智能音箱变身私人音乐管家? 【免费下载链接】xiaomusic 使用小爱音箱播放音乐,音乐使用 yt-dlp 下载。 项目地址: https://gitcode.com/GitHub_Trending/xia/xiaomusic 你是否曾经想过,家里的小爱音…...

5分钟搞定:Mac用户制作Windows启动盘的终极指南

5分钟搞定:Mac用户制作Windows启动盘的终极指南 【免费下载链接】windiskwriter 🖥 A macOS app that creates bootable USB drives for Windows. 🛠 Patches Windows 11 to bypass TPM and Secure Boot requirements. 项目地址: https://g…...

智能影像雅鉴系统:丹青识画在美术馆导览中的落地实操

智能影像雅鉴系统:丹青识画在美术馆导览中的落地实操 1. 艺术与科技的完美融合 1.1 传统导览的痛点与革新 在美术馆参观时,我们常常面临这样的困境:站在一幅名画前,却无法真正理解其深层意境;面对珍贵文物&#xff…...

当仿真与FPGA打架时,你该信谁?

该文章同步至公众号OneChan 一、一个真实的故事:比特翻转的“罗生门” 去年,我们在做一款通信芯片的嵌入式固件开发。在仿真环境中,我们精心编写的DMA驱动完美无缺,数据传输的CRC校验次次通过。我们信心满满地把比特流下载到FPG…...

Windows驱动管理与系统优化:DriverStore Explorer全方位解决方案

Windows驱动管理与系统优化:DriverStore Explorer全方位解决方案 【免费下载链接】DriverStoreExplorer Driver Store Explorer [RAPR] 项目地址: https://gitcode.com/gh_mirrors/dr/DriverStoreExplorer 设备驱动维护是保障Windows系统稳定运行的核心环节&…...

突破B站缓存限制:m4s-converter视频格式转换完全指南

突破B站缓存限制:m4s-converter视频格式转换完全指南 【免费下载链接】m4s-converter 一个跨平台小工具,将bilibili缓存的m4s格式音视频文件合并成mp4 项目地址: https://gitcode.com/gh_mirrors/m4/m4s-converter 当旅行途中想离线观看缓存视频却…...

3步搞定大麦网自动抢票:告别手速不够的时代

3步搞定大麦网自动抢票:告别手速不够的时代 【免费下载链接】Automatic_ticket_purchase 大麦网抢票脚本 项目地址: https://gitcode.com/GitHub_Trending/au/Automatic_ticket_purchase 还在为抢不到心仪演唱会门票而烦恼吗?当周杰伦、五月天等热…...

Wan2.1视频生成小白必看:避开这些坑,让你的视频生成一次成功

Wan2.1视频生成小白必看:避开这些坑,让你的视频生成一次成功 1. 为什么你的视频生成总是失败? 很多新手第一次使用Wan2.1视频生成模型时,都会遇到各种问题:生成的视频模糊不清、内容与描述不符、甚至直接失败。这通常…...

程序实现环境温度对传感器的误差补偿,不同温度下测量精度一致,颠覆温漂难题。

无论你是做工业传感还是消费电子,只要你测物理量(电压、电流、压力、流量),温度就是精度的头号杀手。今天我们用 Python 打造一套自适应温度补偿系统,让仪器在不同温度下“不忘初心”。一、 实际应用场景描述 (Scenari…...

仙侠H5手游【九州封魔劫代金券内购版】服务端图文搭建教程(含资源下载+部署过程)

游戏截图搭建环境信息 系统:Centos 7.6 内存:4G 处理器:2核 注意事项 复制代码需要通过浏览器打开文章才不会报错 搭建资源获取 百度网盘:https://pan.baidu.com/s/1wmz7RegQGBaNrYYVbuJqgg?pwdkdn4 解压密码:www.won…...

抖音无水印视频批量下载全攻略:技术解析与实战指南

抖音无水印视频批量下载全攻略:技术解析与实战指南 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback support.…...

FreeRTOS数据通信避坑指南:为什么我的MessageBuffer总是接收失败?

FreeRTOS消息缓冲区实战:从接收失败到高效通信的深度解析 第一次在FreeRTOS项目中使用MessageBuffer时,我遇到了一个令人抓狂的问题——明明发送端显示消息已成功写入,接收端却总是返回0字节。调试器显示缓冲区非空,但xMessageBuf…...

【Leetcode LCR 112】【记忆化搜索】矩阵中的最长递增路径

题目跳转 这一道题十分有意思(bushi),我们来一起看一下 1.题目考点与理解 主要考点: 记忆化搜索DFS 的递归思想与状态定义方向遍历与边界合法性判断 主要理解: 重要理解1 : 不一定要从最小的111开始,每一个都需要遍历(贪心思想错误) 重要理解2&#…...

别再踩坑了!Jetson Nano/Xavier NX上PyTorch和torchvision版本匹配保姆级指南(含JetPack 5/6)

Jetson设备PyTorch环境配置终极避坑手册:从版本匹配到性能调优 刚拿到Jetson Nano或Xavier NX的开发者们,十个里有九个会在PyTorch环境配置上栽跟头。不是torchvision报错就是CUDA不可用,最崩溃的是好不容易装好了却发现性能还不如树莓派。本…...

金仓数据库KingbaseES KSQL命令行工具实战指南:从基础操作到高级调优

1. KSQL命令行工具入门指南 第一次接触金仓数据库的KSQL命令行工具时,我完全被它强大的功能震撼到了。作为DBA日常运维的瑞士军刀,KSQL不仅能完成基本的数据库操作,还能进行深度性能分析和调优。记得刚开始使用时,我还在纠结要不要…...

抖音批量下载终极指南:3分钟掌握高效无水印下载技巧

抖音批量下载终极指南:3分钟掌握高效无水印下载技巧 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback support…...

如何突破设备限制?打造你的全场景跨平台开发中枢

如何突破设备限制?打造你的全场景跨平台开发中枢 【免费下载链接】code-server VS Code in the browser 项目地址: https://gitcode.com/GitHub_Trending/co/code-server 在多设备开发的时代,远程开发环境已成为连接不同终端的核心枢纽&#xff0…...

5分钟成为效率大师!NoteGen快捷键可视化配置终极指南

5分钟成为效率大师!NoteGen快捷键可视化配置终极指南 【免费下载链接】note-gen 一款专注于记录和写作的跨端 AI 笔记应用。 项目地址: https://gitcode.com/GitHub_Trending/no/note-gen NoteGen是一款专注于记录和写作的跨端AI笔记应用,通过快捷…...

Java泛型中的List

本文将详细回答java泛型中的listt extends base>使用问题。 在java中,泛型提供了强大的类型安全机制,但其一些特点也容易引起混淆,如listt extends base>开发者经常感到困难。假设sub是base的子类:public class base { }pub…...