如何在SQL中删除重复行？

介绍

SQL数据库通常会遭受重复记录，阻碍数据分析和操作效率。本指南提供了用于删除这些冗余条目的实用技术，无论您是使用客户数据，交易日志还是其他数据集。我们将介绍SQL语法，实际示例和最佳实践，以确保在整个删除过程中数据完整性。

关键区域覆盖

本指南介绍了SQL中重复记录的根本原因，探讨了各种检测和删除方法，详细信息相关的SQL语法，并突出显示了维持数据质量的最佳实践。

目录

• 在SQL中删除重复行
  • 识别重复条目
  • ROW_NUMBER()用于重复删除
  • 自加入方法以重复消除
  • 创建具有唯一记录的新表格
• 常见问题

如何在SQL中删除重复行？

存在几种方法来消除SQL中的重复行，每行都具有自己的优势。最佳方法取决于您的数据库系统和特定要求。

重复数据的常见原因

重复的行通常源于：

• 数据输入错误：手动输入期间的人为错误。
• 数据集合并：在没有适当删除的情况下组合数据集。
• 导入过程错误：数据导入过程中的错误。

识别重复记录

在删除之前，您必须首先识别重复行。这些通常在一个或多个列之间共享相同的值。

SQL语法：

选择Column1，Column2，Count（*）
来自table_name
组1列1，列2
具有计数（*）> 1;

例子：

考虑employees表：

ID	姓名	电子邮件
1	爱丽丝	alice@example.com
2	鲍勃	bob@example.com
3	颂歌	carol@example.com
4	爱丽丝	alice@example.com
5	戴夫	dave@example.com

查找重复的电子邮件：

选择电子邮件，计数（*）
来自员工
通过电子邮件组
具有计数（*）> 1;

输出：

电子邮件	数数（*）
alice@example.com	2

这揭示了不止一次出现的电子邮件。

使用ROW_NUMBER()删除重复项

ROW_NUMBER()窗口函数为分区中的每一行分配一个唯一的顺序编号，从而实现有效的重复删除。

SQL语法：

用CTE为（
    选择列1，列2， 
           row_number（）over（column1，column2 column2 order（select null））为rn
    来自table_name
）
从CTE删除
其中rn> 1;

例子：

根据电子邮件删除重复的employees ：

用CTE为（
    选择ID，名称，电子邮件， 
           ROW_NUMBER（）OVER（通过ID的电子邮件订单分区）为RN
    来自员工
）
从CTE删除
其中rn> 1;

输出：

该表现在仅包含唯一的条目。

使用自我加入删除重复

自加入为识别和删除重复项提供了另一种有效的方法。

SQL语法：

删除T1
来自table_name t1
加入Table_name T2
在t1.column1 = t2.column1上
和t1.column2 = t2.column2
和t1.id> t2.id;

例子：

从employees那里删除重复项：

删除E1
来自员工E1
加入员工E2
在e1.email = e2.email上
和e1.id> e2.id;

输出：

该表现在仅包含唯一的条目。

创建具有唯一记录的新表格

创建仅包含独特记录然后更换原始表的新表是一种强大而安全的方法。

SQL语法：

创建表new_table作为
选择不同的 *
来自old_table;

drop table old_table;

Alter table new_table重命名为old_table;

例子：

清理employees的重复项：

创建table雇员_unique作为
选择不同的 *
来自员工；

桌面员工；

Alter Table Employs_unique将员工重命名；

输出：

employees表现在仅包含独特的行。

防止重复的最佳实践

• 数据验证：在数据插入之前实施验证规则。
• 独特的约束：在相关列上使用唯一的约束。
• 定期审核：进行定期数据检查以保持准确性。

结论

有效的重复行管理对于数据库维护至关重要。描述的方法ROW_NUMBER() ，自加入并创建新表格 - 为实现这一目标提供了各种方法。请记住在执行任何删除操作之前备份数据。

常见问题

Q1。是什么导致SQL数据库中的重复行？ A.数据输入错误，导入问题和数据集合并不当。

Q2。如何避免在删除过程中避免意外数据丢失？答：备份您的数据并仔细查看您的SQL查询。

Q3。可以在不更改原始表的情况下删除重复项吗？答：是的，通过创建具有唯一记录的新表。

Q4。 ROW_NUMBER()与重复删除的DISTINCT ？ A. ROW_NUMBER()提供了更多的颗粒状控制，可以保留哪些行。独特的简单消除了DISTINCT 。

以上是如何在SQL中删除重复行？的详细内容。更多信息请关注PHP中文网其他相关文章！