首頁 >資料庫 >mysql教程 >MySQL怎麼去除重複資料?

MySQL怎麼去除重複資料?

零下一度
零下一度原創
2017-06-29 15:42:371421瀏覽

這篇文章主要介紹了MySQL 移除重複資料實例詳解的相關資料,需要的朋友可以參考下

MySQL 去重複資料實例詳解

有兩個意義上的重複記錄,一是完全重複的記錄,也即所有欄位都重複,二是部分欄位重複的記錄。對於第一種重複,比較容易解決,只需在查詢語句中使用distinct關鍵字去重,幾乎所有資料庫系統都支援distinct操作。發生這種重複的原因主要是表設計不周,透過給表增加主鍵或唯一索引列即可避免。


select distinct * from t;

對於第二類重複問題,通常會要求查詢出重複記錄中的任一筆記錄。假設表t有id,name,address三個字段,id是主鍵,有重複的字段為name,address,要求得到這兩個字段唯一的結果集。

-- Oracle、MySQL,使用相關子查詢


select * from t t1

 where t1.id =

 (select min(t2.id)

  from t t2

  where t1.name = t2.name and t1.address = t2.address);

 -- Hive只支援在FROM子句使用子查詢,子查詢必須有名字,且列必須唯一


select t1.*

 from t t1,

   (select name, address, min(id) id from t group by name, address) t2

 where t1.id = t2.id;

-- 也可以使用hive的row_number()分析函數


select t.id, t.name, t.address

 from (select id, name, address,

row_number() over (distribute by name, address sort by id) as rn 

     from t) t 

 where t.rn=1;

以上是MySQL怎麼去除重複資料?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn