SQL选择性快速删除大量数据千万亿级方法

--SQL选择性分批删除大量数据千万亿级
DECLARE @OneCount int
set @OneCount=100000 --每批删除的记录数10W
print Convert(varchar(50),getdate(),120)
while 1=1
begin
Delete Top(@OneCount) from TankMonitor where TnkM_GenTime<'2021-06-07 0:0:01';
if (@@RowCount<@OneCount) Break;
print Convert(varchar(50),getdate(),120)
WaitFor DELAY '00:00:02' --等待几秒再继续
end
print '删除完成'
--说明 :@OneCount 每次删除的数据量,此处设置10w,可根据实际情况调整。
--SQL Server中@@RowCount返回受上一语句影响的行数
--优化说明:尽量让删除语句使用索引,前提是where子句中用索引列做筛选
--执行前:先删除或禁用表中无关索引(即对当前DELETE语句无用的索引),删除前先生成对应的重建SQL,以便完成数据删除后,重新创建索引

实测:

索引多了,在对大表IO的时候严重影响性能啊,最开始用原表的4个索引,我分批删除了42分钟才删除690万条,然后我取消操作。清除掉表中全部索引,单独建了 一个where 用到的聚集性索引。删除速度提高了至少10倍。11分钟即删除掉了4900万条

 

posted @   IT情深  阅读(124)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后,我竟然真的恢复了删除的微信聊天记录!
· AI技术革命,工作效率10个最佳AI工具
点击右上角即可分享
微信分享提示