postgresql根据主键ID字段分批删除表数据
生产环境针对大表的处理相对比较麻烦。
方案1、直接truncate,可能会遇到系统卡主的情况,因为truncate的过程中会对表进行加锁,会导致数据不能正常的写入
方案2、创建一个同结构的表结构,rename旧表,不停业务rename表担心会影响业务,建议是先停止接口进程,停止写入后再rename,然后创建一个同样的表结构
方案3、批量删除数据后再truncate回收空间,批量删除过程中,会产生比较多的wal日志,同时还要考虑主从复制的延迟,但是稳妥,不会影响系统卡死
以下通过ID字段分批删除数据示例:
清理脚本如下:$ cat del.sh
#!/bin/bash
#$1对应表名,$2对应主键列,$3对应一次删除多少行i=`psql -h 127.0.0.1 -U postgres -d t1db -c "select ceil(count(1)/${3}::float) from ${1} where created_at > '2024-12-30 23:59:59'"`
n=`echo ${i} |awk -F ' ' '{print $3}'`
c=1
#echo ${n}
#echo `echo ${i} |awk -F ' ' '{print "一共需要执行",$3,"次"}'`
while [ $c -le $n ]
doecho `date`echo '一共需要执行'${n}'次,当前执行第'${c}'次'echo '一共需要执行'${n}'次,当前执行第'${c}'次' > /home/postgres/deldata.txtreturns=`psql -h 127.0.0.1 -U postgres -d t1db -c "delete from ${1} where ${2} =any (select ${2} from ${1} where created_at > '2024-12-30 23:59:59' limit ${3} );"`echo `date`c=$[ $c+1 ]
done
清理日志记录
[postgres@oradb ~]$ sh -x del.sh test_table id 10000
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'select ceil(count(1)/10000::float) from test_table where created_at > '\''2024-12-30 23:59:59'\'''
+ i=' ceil
------48
(1 row)'
++ echo ceil ------ 48 '(1' 'row)'
++ awk -F ' ' '{print $3}'
+ n=48
+ c=1
+ '[' 1 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:54 CST 2025
Fri Jan 24 09:16:54 CST 2025
+ echo 一共需要执行48次,当前执行第1次
一共需要执行48次,当前执行第1次
+ echo 一共需要执行48次,当前执行第1次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:54 CST 2025
Fri Jan 24 09:16:54 CST 2025
+ c=2
+ '[' 2 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:54 CST 2025
Fri Jan 24 09:16:54 CST 2025
+ echo 一共需要执行48次,当前执行第2次
一共需要执行48次,当前执行第2次
+ echo 一共需要执行48次,当前执行第2次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:54 CST 2025
Fri Jan 24 09:16:54 CST 2025
+ c=3
+ '[' 3 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:54 CST 2025
Fri Jan 24 09:16:54 CST 2025
+ echo 一共需要执行48次,当前执行第3次
一共需要执行48次,当前执行第3次
+ echo 一共需要执行48次,当前执行第3次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ c=4
+ '[' 4 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ echo 一共需要执行48次,当前执行第4次
一共需要执行48次,当前执行第4次
+ echo 一共需要执行48次,当前执行第4次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ c=5
+ '[' 5 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ echo 一共需要执行48次,当前执行第5次
一共需要执行48次,当前执行第5次
+ echo 一共需要执行48次,当前执行第5次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ c=6
+ '[' 6 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ echo 一共需要执行48次,当前执行第6次
一共需要执行48次,当前执行第6次
+ echo 一共需要执行48次,当前执行第6次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ c=7
+ '[' 7 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ echo 一共需要执行48次,当前执行第7次
一共需要执行48次,当前执行第7次
+ echo 一共需要执行48次,当前执行第7次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ c=8
+ '[' 8 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:55 CST 2025
Fri Jan 24 09:16:55 CST 2025
+ echo 一共需要执行48次,当前执行第8次
一共需要执行48次,当前执行第8次
+ echo 一共需要执行48次,当前执行第8次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=9
+ '[' 9 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第9次
一共需要执行48次,当前执行第9次
+ echo 一共需要执行48次,当前执行第9次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=10
+ '[' 10 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第10次
一共需要执行48次,当前执行第10次
+ echo 一共需要执行48次,当前执行第10次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=11
+ '[' 11 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第11次
一共需要执行48次,当前执行第11次
+ echo 一共需要执行48次,当前执行第11次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=12
+ '[' 12 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第12次
一共需要执行48次,当前执行第12次
+ echo 一共需要执行48次,当前执行第12次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=13
+ '[' 13 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第13次
一共需要执行48次,当前执行第13次
+ echo 一共需要执行48次,当前执行第13次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ c=14
+ '[' 14 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:56 CST 2025
Fri Jan 24 09:16:56 CST 2025
+ echo 一共需要执行48次,当前执行第14次
一共需要执行48次,当前执行第14次
+ echo 一共需要执行48次,当前执行第14次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=15
+ '[' 15 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第15次
一共需要执行48次,当前执行第15次
+ echo 一共需要执行48次,当前执行第15次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=16
+ '[' 16 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第16次
一共需要执行48次,当前执行第16次
+ echo 一共需要执行48次,当前执行第16次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=17
+ '[' 17 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第17次
一共需要执行48次,当前执行第17次
+ echo 一共需要执行48次,当前执行第17次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=18
+ '[' 18 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第18次
一共需要执行48次,当前执行第18次
+ echo 一共需要执行48次,当前执行第18次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=19
+ '[' 19 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第19次
一共需要执行48次,当前执行第19次
+ echo 一共需要执行48次,当前执行第19次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=20
+ '[' 20 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第20次
一共需要执行48次,当前执行第20次
+ echo 一共需要执行48次,当前执行第20次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ c=21
+ '[' 21 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:57 CST 2025
Fri Jan 24 09:16:57 CST 2025
+ echo 一共需要执行48次,当前执行第21次
一共需要执行48次,当前执行第21次
+ echo 一共需要执行48次,当前执行第21次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=22
+ '[' 22 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第22次
一共需要执行48次,当前执行第22次
+ echo 一共需要执行48次,当前执行第22次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=23
+ '[' 23 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第23次
一共需要执行48次,当前执行第23次
+ echo 一共需要执行48次,当前执行第23次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=24
+ '[' 24 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第24次
一共需要执行48次,当前执行第24次
+ echo 一共需要执行48次,当前执行第24次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=25
+ '[' 25 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第25次
一共需要执行48次,当前执行第25次
+ echo 一共需要执行48次,当前执行第25次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=26
+ '[' 26 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第26次
一共需要执行48次,当前执行第26次
+ echo 一共需要执行48次,当前执行第26次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=27
+ '[' 27 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第27次
一共需要执行48次,当前执行第27次
+ echo 一共需要执行48次,当前执行第27次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=28
+ '[' 28 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第28次
一共需要执行48次,当前执行第28次
+ echo 一共需要执行48次,当前执行第28次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ c=29
+ '[' 29 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:58 CST 2025
Fri Jan 24 09:16:58 CST 2025
+ echo 一共需要执行48次,当前执行第29次
一共需要执行48次,当前执行第29次
+ echo 一共需要执行48次,当前执行第29次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=30
+ '[' 30 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第30次
一共需要执行48次,当前执行第30次
+ echo 一共需要执行48次,当前执行第30次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=31
+ '[' 31 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第31次
一共需要执行48次,当前执行第31次
+ echo 一共需要执行48次,当前执行第31次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=32
+ '[' 32 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第32次
一共需要执行48次,当前执行第32次
+ echo 一共需要执行48次,当前执行第32次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=33
+ '[' 33 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第33次
一共需要执行48次,当前执行第33次
+ echo 一共需要执行48次,当前执行第33次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=34
+ '[' 34 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第34次
一共需要执行48次,当前执行第34次
+ echo 一共需要执行48次,当前执行第34次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=35
+ '[' 35 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第35次
一共需要执行48次,当前执行第35次
+ echo 一共需要执行48次,当前执行第35次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=36
+ '[' 36 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第36次
一共需要执行48次,当前执行第36次
+ echo 一共需要执行48次,当前执行第36次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=37
+ '[' 37 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第37次
一共需要执行48次,当前执行第37次
+ echo 一共需要执行48次,当前执行第37次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ c=38
+ '[' 38 -le 48 ']'
++ date
+ echo Fri Jan 24 09:16:59 CST 2025
Fri Jan 24 09:16:59 CST 2025
+ echo 一共需要执行48次,当前执行第38次
一共需要执行48次,当前执行第38次
+ echo 一共需要执行48次,当前执行第38次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=39
+ '[' 39 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第39次
一共需要执行48次,当前执行第39次
+ echo 一共需要执行48次,当前执行第39次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=40
+ '[' 40 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第40次
一共需要执行48次,当前执行第40次
+ echo 一共需要执行48次,当前执行第40次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=41
+ '[' 41 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第41次
一共需要执行48次,当前执行第41次
+ echo 一共需要执行48次,当前执行第41次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=42
+ '[' 42 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第42次
一共需要执行48次,当前执行第42次
+ echo 一共需要执行48次,当前执行第42次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=43
+ '[' 43 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第43次
一共需要执行48次,当前执行第43次
+ echo 一共需要执行48次,当前执行第43次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=44
+ '[' 44 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第44次
一共需要执行48次,当前执行第44次
+ echo 一共需要执行48次,当前执行第44次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=45
+ '[' 45 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第45次
一共需要执行48次,当前执行第45次
+ echo 一共需要执行48次,当前执行第45次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=46
+ '[' 46 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第46次
一共需要执行48次,当前执行第46次
+ echo 一共需要执行48次,当前执行第46次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ c=47
+ '[' 47 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:00 CST 2025
Fri Jan 24 09:17:00 CST 2025
+ echo 一共需要执行48次,当前执行第47次
一共需要执行48次,当前执行第47次
+ echo 一共需要执行48次,当前执行第47次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 10000'
++ date
+ echo Fri Jan 24 09:17:01 CST 2025
Fri Jan 24 09:17:01 CST 2025
+ c=48
+ '[' 48 -le 48 ']'
++ date
+ echo Fri Jan 24 09:17:01 CST 2025
Fri Jan 24 09:17:01 CST 2025
+ echo 一共需要执行48次,当前执行第48次
一共需要执行48次,当前执行第48次
+ echo 一共需要执行48次,当前执行第48次
++ psql -h 127.0.0.1 -U postgres -d t1db -c 'delete from test_table where id =any (select id from test_table where created_at > '\''2024-12-30 23:59:59'\'' limit 10000 );'
+ returns='DELETE 1'
++ date
+ echo Fri Jan 24 09:17:01 CST 2025
Fri Jan 24 09:17:01 CST 2025
+ c=49
+ '[' 49 -le 48 ']'
[postgres@oradb ~]$
最后对表进行vacuum:
t1db=# vacuum full test_table;
VACUUM
相关文章:
postgresql根据主键ID字段分批删除表数据
生产环境针对大表的处理相对比较麻烦。 方案1、直接truncate,可能会遇到系统卡主的情况,因为truncate的过程中会对表进行加锁,会导致数据不能正常的写入 方案2、创建一个同结构的表结构,rename旧表,不停业务rename表担…...
10.business english-global market
eco-friendly case study: 案例学习 At the workshop工作坊, they agreed to emphasize eco-friendliness,adapt messageing, and boost digital marketing to stand out globally. Our study shows that more people want eco-friendly products in different places.Looks …...
C 语言实现计算一年中指定日期是第几天 题】
引言 在编程的世界里,处理日期和时间相关的问题是非常常见的。比如在日历应用、任务管理系统、数据分析等场景中,经常需要计算某个日期在一年中是第几天。本文将详细介绍如何使用 C 语言来实现这一功能,通过分析代码的结构、逻辑以及可能存在…...
深入理解三高架构:高可用性、高性能、高扩展性的最佳实践
引言 在现代互联网环境下,随着用户规模和业务需求的快速增长,系统架构的设计变得尤为重要。为了确保系统能够在高负载和复杂场景下稳定运行,"三高架构"(高可用性、高性能、高扩展性)成为技术架构设计中的核…...

【反悔堆】力扣1642. 可以到达的最远建筑
给你一个整数数组 heights ,表示建筑物的高度。另有一些砖块 bricks 和梯子 ladders 。 你从建筑物 0 开始旅程,不断向后面的建筑物移动,期间可能会用到砖块或梯子。 当从建筑物 i 移动到建筑物 i1(下标 从 0 开始 )…...

关于使用Mybatis-plus的TableNameHandler动态表名处理器实现分表业务的详细介绍
引言 随着互联网应用的快速发展,数据量呈爆炸式增长。传统的单表设计在面对海量数据时显得力不从心,容易出现性能瓶颈、查询效率低下等问题。为了提高数据库的扩展性和响应速度,分表(Sharding)成为了一种常见的解决方案…...

docker 安装 redis 详解
在平常的开发工作中,我们经常会用到 redis,那么 docker 下应该如何安装 redis 呢?简单来说:第一步:拉取redis镜像;第二步:设置 redis.conf 配置文件;第三步:编写 docker-…...

56. 合并区间
【题目】:56. 合并区间 class Solution { public:vector<vector<int>> merge(vector<vector<int>>& intervals) {// 按照左端点排序sort(intervals.begin(), intervals.end(), [&](vector<int> lhs, vector<int> rhs)…...

BOM对象location与数组操作结合——查询串提取案例
BOM对象location与数组操作结合——查询串提取案例 前置知识 1. Location 对象 Location 对象是 JavaScript 提供的内置对象之一,它表示当前窗口或框架的 URL,并允许你通过它操作或获取 URL 的信息。可以通过 window.location 访问。 主要属性&#…...
Jetson Orin Nano Super之 onnxruntime 编译安装
Jetson Orin Nano Super之 onnxruntime 编译安装 1. 源由2. 步骤步骤一:安装3.26 cmake步骤二:下载代码步骤三:编译代码步骤四:找到安装包步骤五:安装whl包 3. 注意4. 参考资料 1. 源由 Build onnxruntime 1.19.2 fai…...

开发环境搭建-3:配置 nodejs 开发环境 (fnm+ node + pnpm)
在 WSL 环境中配置:WSL2 (2.3.26.0) Oracle Linux 8.7 官方镜像 node 官网:https://nodejs.org/zh-cn/download 点击【下载】,选择想要的 node 版本、操作系统、node 版本管理器、npm包管理器 根据下面代码提示依次执行对应代码即可 基本概…...

[SWPUCTF 2022 新生赛]js_sign
题目 查看页面源代码 <!DOCTYPE html> <html> <head><meta charset"utf-8"><style>body {background-color: rgb(255, 255, 255);}</style> </head> <body><input id"flag" /><button>Check…...

农业信息化的基本框架
农业信息化的主要研究内容 基于作物模型的相关研究 作物生长模拟模型以及模型评价、模型的应用作物模型应用,包括:作物生态系统过程、生产管理措施、区域作物产量评估与气候变化对产量影响预测、基于作物模型的决策支持系统 数据挖掘、知识工程及应用、管…...

OpenAI的真正对手?DeepSeek-R1如何用强化学习重构LLM能力边界——DeepSeek-R1论文精读
2025年1月20日,DeepSeek-R1 发布,并同步开源模型权重。截至目前,DeepSeek 发布的 iOS 应用甚至超越了 ChatGPT 的官方应用,直接登顶 AppStore。 DeepSeek-R1 一经发布,各种资讯已经铺天盖地,那就让我们一起…...
Vue 3 中的父子组件传值:详细示例与解析
在 Vue 3 中,父子组件之间的数据传递是一个常见的需求。父组件可以通过 props 将数据传递给子组件,而子组件可以通过 defineProps 接收这些数据。本文将详细介绍父子组件传值的使用方法,并通过优化后的代码示例演示如何实现。 1. 父子组件传值…...

回顾2024,展望2025
项目 LMD performance phase2 今年修修补补,设计和做了很多item,有时候自己都数不清做了什么大大小小的item,但是for LMD performance phase2的go-live确实是最大也是最难的了,无论什么系统,只要用的人多了ÿ…...

【Python实现机器遗忘算法】复现2021年顶会 AAAI算法Amnesiac Unlearning
【Python实现机器遗忘算法】复现2021年顶会 AAAI算法Amnesiac Unlearning 1 算法原理 论文:Graves, L., Nagisetty, V., & Ganesh, V. (2021). Amnesiac machine learning. In Proceedings of the AAAI Conference on Artificial Intelligence, volume 35, 115…...
Vue 3 30天精进之旅:Day 03 - Vue实例
引言 在前两天的学习中,我们成功搭建了Vue.js的开发环境,并创建了我们的第一个Vue项目。今天,我们将深入了解Vue的核心概念之一——Vue实例。通过学习Vue实例,你将理解Vue的基础架构,掌握数据绑定、模板语法和指令的使…...

【ArcGIS微课1000例】0141:提取多波段影像中的单个波段
文章目录 一、波段提取函数二、加载单波段导出问题描述:如下图所示,img格式的时序NDVI数据有24个波段。现在需要提取某一个波段,该怎样操作? 一、波段提取函数 首先加载多波段数据。点击【窗口】→【影像分析】。 选择需要处理的多波段影像,点击下方的【添加函数】。 在多…...
【第九天】零基础入门刷题Python-算法篇-数据结构与算法的介绍-六种常见的图论算法(持续更新)
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 前言一、Python数据结构与算法的详细介绍1.Python中的常用的图论算法2. 图论算法3.详细的图论算法1)深度优先搜索(DFS)2…...

第一篇:Agent2Agent (A2A) 协议——协作式人工智能的黎明
AI 领域的快速发展正在催生一个新时代,智能代理(agents)不再是孤立的个体,而是能够像一个数字团队一样协作。然而,当前 AI 生态系统的碎片化阻碍了这一愿景的实现,导致了“AI 巴别塔问题”——不同代理之间…...

Reasoning over Uncertain Text by Generative Large Language Models
https://ojs.aaai.org/index.php/AAAI/article/view/34674/36829https://ojs.aaai.org/index.php/AAAI/article/view/34674/36829 1. 概述 文本中的不确定性在许多语境中传达,从日常对话到特定领域的文档(例如医学文档)(Heritage 2013;Landmark、Gulbrandsen 和 Svenevei…...
scikit-learn机器学习
# 同时添加如下代码, 这样每次环境(kernel)启动的时候只要运行下方代码即可: # Also add the following code, # so that every time the environment (kernel) starts, # just run the following code: import sys sys.path.append(/home/aistudio/external-libraries)机…...

day36-多路IO复用
一、基本概念 (服务器多客户端模型) 定义:单线程或单进程同时监测若干个文件描述符是否可以执行IO操作的能力 作用:应用程序通常需要处理来自多条事件流中的事件,比如我现在用的电脑,需要同时处理键盘鼠标…...
6️⃣Go 语言中的哈希、加密与序列化:通往区块链世界的钥匙
Go 语言中的哈希、加密与序列化:通往区块链世界的钥匙 一、前言:离区块链还有多远? 区块链听起来可能遥不可及,似乎是只有密码学专家和资深工程师才能涉足的领域。但事实上,构建一个区块链的核心并不复杂,尤其当你已经掌握了一门系统编程语言,比如 Go。 要真正理解区…...

如何在Windows本机安装Python并确保与Python.NET兼容
✅作者简介:2022年博客新星 第八。热爱国学的Java后端开发者,修心和技术同步精进。 🍎个人主页:Java Fans的博客 🍊个人信条:不迁怒,不贰过。小知识,大智慧。 💞当前专栏…...

AD学习(3)
1 PCB封装元素组成及简单的PCB封装创建 封装的组成部分: (1)PCB焊盘:表层的铜 ,top层的铜 (2)管脚序号:用来关联原理图中的管脚的序号,原理图的序号需要和PCB封装一一…...

DAY 45 超大力王爱学Python
来自超大力王的友情提示:在用tensordoard的时候一定一定要用绝对位置,例如:tensorboard --logdir"D:\代码\archive (1)\runs\cifar10_mlp_experiment_2" 不然读取不了数据 知识点回顾: tensorboard的发展历史和原理tens…...
手动给中文分词和 直接用神经网络RNN做有什么区别
手动分词和基于神经网络(如 RNN)的自动分词在原理、实现方式和效果上有显著差异,以下是核心对比: 1. 实现原理对比 对比维度手动分词(规则 / 词典驱动)神经网络 RNN 分词(数据驱动)…...
PostgreSQL 对 IPv6 的支持情况
PostgreSQL 对 IPv6 的支持情况 PostgreSQL 全面支持 IPv6 网络协议,包括连接、存储和操作 IPv6 地址。以下是详细说明: 一、网络连接支持 1. 监听 IPv6 连接 在 postgresql.conf 中配置: listen_addresses 0.0.0.0,:: # 监听所有IPv4…...