浅谈mysql 的批量delete 和 使用in条件批量删除问题
在考虑这两个DELETE语句的性能时,我们需要考虑数据库如何执行这些查询以及它们背后可能涉及的索引和数据结构。
1.执行多个单独的DELETE语句:
DELETE FROM a WHERE b = 1 AND c = 1;
... DELETE FROM a WHERE b = 1000 AND c = 1000;
这种方法的优点是每个DELETE语句都很简单,且如果a表上有针对b和c的复合索引,数据库优化器可以高效地执行每个DELETE操作。此外,如果每次DELETE影响的记录数较少,这种分批处理的方式可以减少锁定的资源数量,降低对其他查询的影响。
然而,这种方法的缺点是存在大量的网络往返(如果客户端和数据库服务器分开部署),以及可能的日志记录开销(取决于数据库的配置和隔离级别)。
2.单个DELETE语句使用IN子句:
DELETE FROM a WHERE b IN (1,...,1000) AND c IN (1,...,1000);
这种方法的优点是只需要一个网络往返和一个事务日志记录条目(再次取决于配置和隔离级别)。但是,这种方法的性能取决于多个因素:
- 数据库优化器如何解析这个复杂的IN子句,并确定最佳的查询计划。
- 表a上是否有合适的索引来加速查询。
- 数据库是否能够智能地识别出只有那些b和c值都匹配的记录才应该被删除。
需要注意的是,这个IN子句可能不会按预期工作,因为它可能会产生笛卡尔积的效果,即它会尝试匹配所有可能的(b, c)组合,而不仅仅是那些实际存在的组合。如果b和c的值范围不匹配(即不是每个b值都对应一个相同的c值),那么这个查询可能会删除错误的记录。
性能建议:
如果可能的话,使用第一个方法(即多个单独的DELETE语句),特别是当你知道要删除的确切记录时。这通常更加直观,且性能上可能更好(特别是当你有合适的索引时)。
如果必须使用第二个方法(即单个DELETE语句使用IN子句),请确保你的IN子句正确地描述了要删除的记录集,并且已经为相关的列建立了合适的索引。此外,请确保你的数据库优化器能够智能地处理这个查询。
在任何情况下,都应该在生产环境中执行任何删除操作之前,先在测试环境中验证其性能和正确性。
考虑使用事务来包装多个DELETE语句,以确保数据的一致性和可恢复性。如果可能的话,尽量减少事务的大小和持续时间,以减少锁定的资源数量。
相关文章:
浅谈mysql 的批量delete 和 使用in条件批量删除问题
在考虑这两个DELETE语句的性能时,我们需要考虑数据库如何执行这些查询以及它们背后可能涉及的索引和数据结构。 1.执行多个单独的DELETE语句: DELETE FROM a WHERE b 1 AND c 1; ... DELETE FROM a WHERE b 1000 AND c 1000; 这种方法的优点是每…...
【Spring Boot】过滤敏感词的两种实现
文章目录 项目场景前置知识前缀树 实现方式解决方案一:读取敏感词文件生成前缀树构建敏感词过滤器1. 导入敏感词文件 src/main/resources/sensitive_words.txt2. 构建敏感词过滤器 SensitiveFilter3. 测试与使用 解决方案二:使用第三方插件 houbb/sensit…...
在 Zustand 中管理状态能使用类(Class)吗
在 Zustand 中,通常不推荐使用类(Class)来管理状态,因为 Zustand 的设计理念是基于函数式编程和 React Hooks 的。然而,仍然可以在 Zustand 中间接地使用类,但这并不是 Zustand 的典型用法。 如果确实想要…...
MoreTable 方法selectWithFun,count 使用实例
ORM Bee, example for MoreTable methods:selectWithFun,count ORM Bee时, MoreTable 方法selectWithFun,count 使用实例 package org.teasoft.exam.bee.osql;import org.teasoft.bee.osql.BeeException; import org.teasoft.bee.osql.FunctionType; import org.teasoft.be…...
【SpringBoot】在Spring中使用自定义条件类在Java声明Bean时实现条件注入
在Spring框架中,通过实现org.springframework.context.annotation.Condition接口并重写matches()方法,可以根据自定义条件来控制Bean的注入。这种机制非常灵活,可以帮助开发人员根据环境或配置来有选择地启用或禁用某些Bean。本文将详细介绍如…...
网卡聚合链路配置
创建名为mybond0的绑定,使用示例如下: # nmcli con add type bond con-name mybond0 ifname mybond0 mode active-backup添加从属接口,使用示例如下: # nmcli con add type bond-slave ifname enp3s0 master mybond0要添加其他从…...
PlantSimulation导入cad图作为背景
PlantSimulation导入cad图作为背景 首先要整理cad文件,正常的工艺规划总图中存在较多杂乱文件,这些信息是不需要的,如果直接导入,会非常卡。 1、打开cad软件,使用layon命令打开所有的隐藏图层,删除不需要…...
【大模型】个人对大模型选择的见解
选择大模型产品时,需要考虑多个因素,包括但不限于以下几点: 需求匹配度:首先,要明确你的需求是什么。不同的大模型产品可能在功能、性能、应用场景等方面有所侧重。例如,有的模型擅长自然语言处理ÿ…...
java的反射和python的鸭子类型
Java的反射(Reflection)和Python的鸭子类型(Duck Typing)感觉相似但又说不出具体的细节,本文借助kimi试图给出总结。 相似之处: 动态性:Java的反射允许程序在运行时查询、创建和修改类和对象的…...
爬虫工具yt-dlp
yt-dlp是youtube-dlp的一个fork,youtube-dlp曾经也较为活跃,但后来被众多网站屏蔽,于是大家转而在其基础上开发yt-dlp。yt-dlp的github项目地址为:GitHub - yt-dlp/yt-dlp: A feature-rich command-line audio/video downloaderA …...
【代码随想录训练营】【Day 50】【动态规划-9】| Leetcode 198, 213, 337
【代码随想录训练营】【Day 50】【动态规划-9】【需二刷】| Leetcode 198, 213, 337 需强化知识点 需二刷,打家劫舍系列 题目 198. 打家劫舍 class Solution:def rob(self, nums: List[int]) -> int:if len(nums) 1:return nums[0]dp [0] * (len(nums))dp…...
源码讲解kafka 如何使用零拷贝技术(zero-copy)
前言 kafka 作为一个高吞吐量的分布式消息系统,广泛应用与实时应用场景中。为了实现高效的数据传输,kafka使用了零拷贝技术(zero-copy)显著提高了性能。本文将详细讲解 Kafka 如何利用零拷贝技术优化数据传输。 什么是零拷贝 零拷贝技术目的是减少数据传输的效率。在传统…...
Ubuntu20.04配置qwen0.5B记录
环境简介 Ubuntu20.04、 NVIDIA-SMI 545.29.06、 Cuda 11.4、 python3.10、 pytorch1.11.0 开始搭建 python环境设置 创建虚拟环境 conda create --name qewn python3.10预安装modelscope和transformers pip install modelscope pip install transformers安装pytorch co…...
java自学阶段二:JavaWeb开发--day80(项目实战2之苍穹外卖)
《项目案例—黑马苍穹外卖》 目录: 学习目标项目介绍前端环境搭建(前期直接导入老师的项目,后期自己敲)后端环境搭建(导入初始项目,新建仓库使用git管理项目,新建数据库,修改登录功能ÿ…...
HPUX系统Oracle RAC如何添加ASM磁盘
前言 HPUX简介 HP-UX (Hewlett-Packard Unix) 是惠普公司开发的类 Unix 操作系统。自 1980 年代问世以来,HP-UX 在技术和功能上不断发展,适应了多种硬件平台和企业计算需求。以下是 HP-UX 的发展历史概述: 1980 年代:起源与早期…...
Jmeter 压力测测试的简单入门
下载安装 官方网站:Apache JMeter - Download Apache JMeter 下载完成解压即可。 配置 1. 找到 bin 目录下的 ApacheJMeter.jar 包,直接打开 如果向图片这样不能直接打开,就在此路径运行 CMD,然后输入下面的命令即可启动。 ja…...
N叉树的层序遍历-力扣
本题同样是二叉树的层序遍历的扩展,只不过二叉树每个节点的子节点只有左右节点,而N叉树的子节点是一个数组,层序遍历到一个节点时,需要将这个节点的子节点数组的每个节点都入队。 代码如下: /* // Definition for a N…...
解决阿里云的端口添加安全组仍然无法扫描到
发现用线上的网站扫不到这个端口,这个端口关了,但是没有更详细信息了 我用nmap扫了一下我的这个端口,发现主机是活跃的,但是有防火墙,我们列出云服务器上面的这个防火墙list,发现确实没有5566端口 参考&a…...
【因果推断python】26_双重稳健估计1
目录 不要把所有的鸡蛋放在一个篮子里 双重稳健估计 关键思想 不要把所有的鸡蛋放在一个篮子里 我们已经学会了如何使用线性回归和倾向得分加权来估计 。但是我们应该在什么时候使用哪一个呢?在不明确的情况下,请同时使用两者!双重稳健估计…...
C语言 图形化界面方式连接MySQL【C/C++】【图形化界面组件分享】
博客主页:花果山~程序猿-CSDN博客 文章分栏:MySQL之旅_花果山~程序猿的博客-CSDN博客 关注我一起学习,一起进步,一起探索编程的无限可能吧!让我们一起努力,一起成长! 目录 一.配置开发环境 二…...
Ray框架实战:如何用分布式训练加速你的AI模型(附BERT调参案例)
Ray框架实战:如何用分布式训练加速你的AI模型(附BERT调参案例) 当你的BERT模型训练时间从72小时缩短到8小时,GPU利用率从35%提升到89%时,那种"早该用这个工具"的顿悟感会瞬间击中你。这就是Ray框架带给AI工程…...
nanomsg深度解析:高性能消息传递库的架构设计与实战应用
nanomsg深度解析:高性能消息传递库的架构设计与实战应用 【免费下载链接】nanomsg nanomsg library 项目地址: https://gitcode.com/gh_mirrors/na/nanomsg nanomsg是一个轻量级、高性能的可扩展性协议库,实现了多种常见的消息传递模式࿰…...
透视表vs交叉表:用餐厅小费数据掌握Pandas两大分析利器
透视表vs交叉表:用餐厅小费数据掌握Pandas两大分析利器 在数据分析的日常工作中,我们经常需要对数据进行多维度的交叉分析。想象一下这样的场景:你手里有一家连锁餐厅过去三个月的小费数据,老板想知道不同时间段(午餐/…...
HunyuanVideo-Foley开源大模型部署:24G显存专用调度策略深度解读
HunyuanVideo-Foley开源大模型部署:24G显存专用调度策略深度解读 1. 镜像概述与核心价值 HunyuanVideo-Foley 是一款集视频生成与音效生成于一体的多模态大模型,本镜像专为RTX 4090D 24GB显存环境深度优化。相比通用部署方案,本镜像通过以下…...
别再手动P图了!用Python+OpenCV给图片批量加Logo水印,5分钟搞定
PythonOpenCV批量水印自动化:电商与自媒体工作流效率革命 每次处理上百张产品图时,最痛苦的不是修图调色,而是机械重复地拖动Logo到每个角落——这几乎是所有电商美工的日常噩梦。我曾用3小时完成200张新品上架图的品牌标识添加,直…...
从油电耦合逻辑到动力分配算法,Dmi混动系统的仿真总让人头秃。今天咱们直接扒开Simulink模型的外壳,看看这套正向开发框架怎么把混动车的灵魂装进代码里
MTALAB/SIMULINK搭建的 Dmi 混动系统整车仿真模型 1、p13 混动系统正向仿真的模型 2、包含整车各系统完整的零部件建模和参数配置 3、支持整车不同性能指标分析与验证打开模型库你会发现,这根本不是个玩具车——发动机MAP图用三维查表实现,电池SOC估算嵌…...
用OpenCV和C++实现无人机影像自动匹配:从Moravec特征点到NCC相关系数的完整流程
无人机影像智能匹配实战:基于OpenCV的Moravec与NCC全流程解析 当无人机掠过一片待测区域时,它每秒能捕获数十张高分辨率影像。这些影像蕴含着丰富的地理信息,但如何让这些二维图片"对话",构建出三维世界的数字孪生&…...
NaViL-9B开源大模型教程:统一prompt接口处理文本/图文输入逻辑
NaViL-9B开源大模型教程:统一prompt接口处理文本/图文输入逻辑 1. 模型简介 NaViL-9B是由国内领先研究机构发布的开源多模态大语言模型,具备同时处理文本和图像输入的能力。与传统的单模态模型不同,它通过统一的接口实现了文本问答和视觉理…...
Pixel Mind Decoder 3分钟快速上手教程:星图平台一键部署体验
Pixel Mind Decoder 3分钟快速上手教程:星图平台一键部署体验 1. 快速了解Pixel Mind Decoder Pixel Mind Decoder是一款基于深度学习的情绪分析工具,能够从文本中准确识别用户情绪状态。它特别适合需要快速分析大量用户反馈、评论或社交内容的场景。通…...
LoRa通信实战:手把手教你用Matlab仿真Chirp扩频信号(附完整代码)
LoRa通信实战:手把手教你用Matlab仿真Chirp扩频信号(附完整代码) 在物联网设备爆炸式增长的今天,低功耗广域网络(LPWAN)技术正成为连接万物的关键纽带。作为LPWAN的代表性技术之一,LoRa凭借其卓越的穿透能力和超远传输…...
