怎样在SQL Server中分批DELETE千万级历史数据

胖强大大_7118

胖强大大_7118

2026-10-14

181人浏览

原创

直接删除千万级数据会引发锁表、日志暴涨等问题;必须用id+时间双重约束分批删除,确保不漏不重;保留数据重建表更快但需停服;还需索引、恢复模式和执行时段三大前提保障。

怎样在sql server中分批delete千万级历史数据

直接用 DELETE FROM table WHERE date 删千万级数据,基本等于给线上服务下“停机令”:锁表、日志暴涨、查询卡死、tempdb 爆满——这不是删数据,是制造事故。

为什么不能只靠时间字段 + TOP 分批?

时间字段重复太常见(比如批量导入、毫秒精度缺失、业务逻辑允许同秒多条),导致 DELETE TOP (10000) FROM t WHERE create_time 每次都可能删同一组行,或跳过某些行。实测中漏删 5%~15% 是常态。

  • 必须把删除范围锚定在唯一、有序、索引覆盖的列上,首选自增 id 或 identity 列
  • 即使 id 是主键,ORDER BY id 也必须显式写出,SQL Server 不保证 TOP 的隐式顺序
  • WHERE 条件里要同时包含时间过滤和 id > @last_id,形成双重约束

安全分批 DELETE 的最小可靠模板

以下写法经生产环境验证,适用于 SQL Server 2005+,重点在「不漏、不重、可控、可中断」:

DECLARE @batch_size INT = 10000;
DECLARE @rows_affected INT = 1;
DECLARE @last_id BIGINT = 0;
<p>WHILE @rows_affected > 0
BEGIN
BEGIN TRANSACTION;</p><p>DELETE TOP (@batch_size) 
FROM orders 
WHERE order_date  @last_id
ORDER BY id;</p><p>SET @rows_affected = @@ROWCOUNT;
SET @last_id = (SELECT ISNULL(MAX(id), @last_id) FROM orders WHERE order_date  @last_id);</p><p>COMMIT TRANSACTION;</p><p>WAITFOR DELAY '00:00:00.05'; -- 防止日志写入过于密集
END</p>
  • @last_id 必须每次更新,否则下一批会重复删或跳过
  • ORDER BY id 不可省略,否则 SQL Server 可能任意选行,破坏顺序性
  • 如果 id 不是聚集索引,确保它有独立索引,否则性能断崖下跌
  • WAITFOR DELAY 值不是固定套路,根据日志文件增长速度调:日志涨得快就加长,反之可缩短甚至去掉

比循环 DELETE 更快的替代方案:保留数据重建表

当你要删的是大多数(比如删 80%、只留 20%),DELETE 循环再怎么优化也是“搬沙子”,不如“换新桶”:

  • 先用 SELECT INTO 或 CREATE TABLE ... AS SELECT 把要保留的数据导出到新表(带索引结构更好)
  • 用 sp_rename 切换表名,原表改名备份
  • 确认无误后 DROP TABLE 原表
  • 注意:外键、权限、触发器不会自动迁移,需脚本补全;操作期间表不可写,务必安排在维护窗口

这个方案实际耗时往往是循环 DELETE 的 1/5,但代价是短暂服务中断和元数据手工同步——是否采用,取决于你更怕“慢”,还是更怕“停”。

容易被忽略的三个硬性前提

再正确的脚本,缺了这三项,照样崩:

  • order_date 字段必须有索引(最好是复合索引 (order_date, id)),否则每次 WHERE order_date 都是全表扫描
  • 数据库恢复模式若为 FULL,必须在执行前做一次日志备份,并考虑临时切到 SIMPLE 模式(操作完记得切回)
  • 务必在非高峰时段执行;哪怕加了 WAITFOR,凌晨 2 点跑和上午 10 点跑,对业务影响天壤之别
PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
大数据分析工具有哪四个
大数据分析工具有哪四个

大数据分析的四个工具分别是rapidminer、Hpcc、Hadoop和Pentaho bi。大数据分析用于从各种来源生成的原始数据中提取有价值的数据。这些数据帮助我们获得有意义的见解、隐藏的模式、未知的相关性、市场趋势等等,具体取决于行业。大数据分析的主要动机是提供有价值的见解,以便为未来做出更好的决策。php中文网为大家带来了大数据分析的相关教程、以及相关文章等内容,供大家免费下载使用。

2023.06.21

4956

5

Java 大数据处理基础(Hadoop 方向)
Java 大数据处理基础(Hadoop 方向)

本专题聚焦 Java 在大数据离线处理场景中的核心应用,系统讲解 Hadoop 生态的基本原理、HDFS 文件系统操作、MapReduce 编程模型、作业优化策略以及常见数据处理流程。通过实际示例(如日志分析、批处理任务),帮助学习者掌握使用 Java 构建高效大数据处理程序的完整方法。

2025.12.08

1249

12

大数据专业学习教程
大数据专业学习教程

本专题整合了大数据专业学习相关教程,阅读专题下面的文章了解更多详细内容。

2026.01.05

243

5

python处理大数据合集
python处理大数据合集

本专题整合了python处理大数据相关教程,阅读专题下面的文章了解更多详细内容。

2026.01.05

466

22

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5331

4

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2023.06.29

2625

3

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

2023.08.14

3861

10

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

2023.08.31

2871

3

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.05

927

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习