如何在MySQL中查询重复数据并只保留ID最大的一条?

梦强小哥_6069

梦强小哥_6069

2026-07-05

480人浏览

原创

用 group by + max() 先定位每组重复数据中要保留的最大 id,再通过 join 安全删除其余重复行;注意 having count(*) > 1 过滤单条记录,null 值需单独处理。

如何在mysql中查询重复数据并只保留id最大的一条?

用 GROUP BY + MAX() 找出每组重复数据中最大的 id

核心思路是:先按业务字段(比如 emailphone)分组,再用 MAX(id) 拿到每组里要保留的那条记录的 id。这步不删数据,只是定位目标。

假设表叫 users,重复依据是 email 字段:

SELECT MAX(id) AS keep_id, email
FROM users
GROUP BY email
HAVING COUNT(*) > 1;

注意 HAVING COUNT(*) > 1 是必须的——它过滤掉那些其实不重复的组,避免误选单条记录的 id

用 JOIN 或子查询删除其余重复行

直接 DELETE FROM users WHERE id NOT IN (...) 很危险:MySQL 不允许对同一张表先查后删(会报错 You can't specify target table 'users' for update in FROM clause)。得绕开。

推荐用 JOIN 写法,安全且高效:

DELETE u1 FROM users u1
INNER JOIN users u2 
  ON u1.email = u2.email AND u1.id <p>这条语句的意思是:对每一对 <code>email</code> 相同的记录,只要 <code>u1.id</code> 小于 <code>u2.id</code>,就删掉 <code>u1</code>。最终每组只留下 <code>id</code> 最大的那条。</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill2334" title="MySQL"><img
														src="https://img.php.cn/upload/skill/000/000/081/178900927846657.jpg" alt="MySQL" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/skill2334" title="MySQL" class="overflowclass">MySQL</a>
													<p class="overflowclass">编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。</p>
												</div>
												<a rel="nofollow" href="/xiazai/skill2334" title="MySQL" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div><p>如果你习惯子查询,可以这样包装一层(但性能略差):</p><pre class="brush:php;toolbar:false;">DELETE FROM users 
WHERE id NOT IN (
  SELECT keep_id FROM (
    SELECT MAX(id) AS keep_id FROM users GROUP BY email
  ) AS t
);

执行前务必加 WHERE 条件限制影响范围

线上表动辄百万行,一个没加条件的 DELETE 可能锁表几分钟甚至更久。别跳过这步验证:

  • 先用 SELECT 模拟要删的数据:
    SELECT * FROM users u1
    INNER JOIN users u2 
      ON u1.email = u2.email AND u1.id 
  • 确认无误后,再跑 DELETE,并加上 LIMIT 控制单次操作量(尤其大表):
    DELETE u1 FROM users u1
    INNER JOIN users u2 
      ON u1.email = u2.email AND u1.id 
  • 如果表有主键以外的唯一索引(比如 UNIQUE(email)),删完记得检查是否冲突——因为删除过程可能让原本被覆盖的重复值“浮上来”。

事务 + 备份是底线,不是可选项

哪怕测试环境也别裸删。真实场景下,DELETE 语句一旦执行,binlog 虽能恢复,但中间状态不可逆。最稳妥做法:

开启事务:

BEGIN;
DELETE u1 FROM users u1
INNER JOIN users u2 
  ON u1.email = u2.email AND u1.id  1;
-- 没问题再提交
COMMIT;

如果发现删错了,立刻 ROLLBACK。另外,执行前用 mysqldump 导出关键数据,比任何补救都快。

真正麻烦的不是语法,而是没意识到:重复逻辑是否覆盖了所有业务场景(比如 NULL 值在 GROUP BY 中会被归为一组,但 JOIN 条件里 u1.email = u2.email 会跳过 NULL)——这点常被忽略。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

1873

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1159

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

675

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2412

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

3928

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

959

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

4211

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

3842

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

4894

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 166人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 263人学习