PostgreSQL如何高效删除千万行中的特定数据_通过建立新表Swap方式

梦萱姑娘_9995

梦萱姑娘_9995

2026-05-13

429人浏览

原创

千万级表直接DELETE WHERE易卡死,因MVCC机制导致行锁、WAL膨胀、触发器/外键校验耗时剧增;Swap方案通过CREATE TABLE AS SELECT+RENAME原子切换,规避长事务与锁表风险。

postgresql如何高效删除千万行中的特定数据_通过建立新表swap方式

为什么不能直接 DELETE WHERE 条件删千万行

直接 DELETE FROM orders WHERE status = 'archived' 在千万级表上极易卡死:InnoDB 或 PostgreSQL 的 MVCC 机制会为每行生成新版本、写 WAL、膨胀事务日志,同时持有行锁或页锁,导致其他查询被阻塞。更糟的是,如果表有外键或触发器,每次删除还要校验关联表——嵌套校验会让耗时从分钟级飙升到小时级。

Swap 方式核心思路:CREATE TABLE AS SELECT + RENAME

不改原表、不删数据、不锁长事务,而是用“以空间换时间+原子切换”的方式安全落地。关键在于只保留要留下的数据,把旧表当临时备份。

  • 先确保目标字段(如 created_at、status)有高效索引,否则 SELECT 扫描太慢
  • 用 CREATE TABLE orders_new AS SELECT * FROM orders WHERE status != 'archived' 构建干净新表(注意:不带约束、索引、默认值)
  • 手动补全结构:ALTER TABLE orders_new ADD PRIMARY KEY (id)、重建索引、加外键、设默认值
  • 原子切换:BEGIN; ALTER TABLE orders RENAME TO orders_old; ALTER TABLE orders_new RENAME TO orders; COMMIT;
  • 确认无误后,再异步 DROP TABLE orders_old(别在主事务里干这事)

容易踩的坑:约束、权限、序列和统计信息

Swap 后最常出问题的不是数据,而是元数据断层:

  • CREATE TABLE ... AS SELECT 不复制 DEFAULT、CHECK、NOT NULL 约束,必须显式 ALTER TABLE ... ALTER COLUMN ... SET NOT NULL 补上
  • 外键引用原表?切换后需重跑 ALTER TABLE child_table ADD FOREIGN KEY (order_id) REFERENCES orders(id)
  • 自增序列(SERIAL)不会自动绑定到新表,得 ALTER SEQUENCE orders_id_seq OWNED BY orders.id
  • 权限丢失:新表默认只有创建者权限,要用 GRANT SELECT, INSERT ON orders TO app_user 重新赋权
  • 别忘了 ANALYZE orders,否则查询计划器还按老表统计信息走,可能选错索引

什么情况下 Swap 比 TRUNCATE + INSERT 更合适

当你需要保留部分数据(比如只删 80%,留 20%),又不想让业务长时间等待 DELETE 锁表时,Swap 是唯一稳妥选择。TRUNCATE 只能清空整表,而分批 DELETE 容易因主从延迟、锁竞争、WAL 压力失控崩盘。Swap 把高风险操作拆成可验证的离线步骤,真正影响业务的时间仅限于最后那几毫秒的 RENAME。

但要注意:Swap 需要双倍磁盘空间,且期间不能有对原表的 DDL(如加列),否则 RENAME 可能失败。线上执行前,务必在从库或影子库上预演一遍完整流程。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
postgresql常用命令
postgresql常用命令

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、\l、\c、\dt、\d table_name、\du、\i file_name、\e和\q等。本专题为大家提供postgresql相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.10

233

5

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4809

19

postgresql常用命令有哪些
postgresql常用命令有哪些

postgresql常用命令psql、createdb、dropdb、createuser、dropuser、\l、\c、\dt、\d table_name、\du、\i file_name、\e和\q等。更详细的postgresql常用命令,大家可以访问下面的文章。

2023.11.16

647

3

postgresql常用命令介绍
postgresql常用命令介绍

postgresql常用命令有\l、\d、\d5、\di、\ds、\dv、\df、\dn、\db、\dg、\dp、\c、\pset、show search_path、ALTER TABLE、INSERT INTO、UPDATE、DELETE FROM、SELECT等。想了解更多postgresql的相关内容,可以阅读本专题下面的文章。

2023.11.20

1396

6

PostgreSQL性能优化与索引调优实战
PostgreSQL性能优化与索引调优实战

本专题面向后端开发与数据库工程师,深入讲解 PostgreSQL 查询优化原理与索引机制。内容包括执行计划分析、常见索引类型对比、慢查询优化策略、事务隔离级别以及高并发场景下的性能调优技巧。通过实战案例解析,帮助开发者提升数据库响应速度与系统稳定性。

2026.02.12

480

19

PostgreSQL 性能优化与查询执行计划实战
PostgreSQL 性能优化与查询执行计划实战

本专题深入解析PostgreSQL性能优化核心,聚焦查询执行计划的实战应用。通过EXPLAIN命令精准定位瓶颈,结合索引策略、SQL改写与参数调优,系统提升查询效率。从执行计划解读到性能调优全流程,助你掌握数据库性能诊断与优化实战能力。

2026.05.08

150

10

PostgreSQL 在 Next.js / Go 全栈架构中的工程化实践
PostgreSQL 在 Next.js / Go 全栈架构中的工程化实践

本文详解如何利用Next.js(搭配Drizzle ORM)与Go后端构建高性能应用,充分发挥PG在JSONB非结构化存储与pgvector向量检索上的优势。从数据建模到Docker容器化部署,打造支持AI时代的“One Database”工程化解决方案。

2026.05.08

901

10

PostgreSQL高级特性、内核机制与现代数据架构
PostgreSQL高级特性、内核机制与现代数据架构

本专题从MVCC并发控制与WAL日志等内核机制出发,详解JSONB、PostGIS及pgvector等高级特性。探讨如何利用单一引擎支撑关系型、向量及图数据等现代数据架构需求,助您掌握构建高并发、智能化应用的核心技术。

2026.05.08

244

10

数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2023.06.29

3025

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习