【转】Sql去除重复记录

有两个意义上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。 

1、对于第一种重复，比较容易解决，使用 

        select   distinct   *   from   tableName 

就可以得到无重复记录的结果集。 

如果该表需要删除重复的记录（重复记录保留1条），可以按以下方法删除 

        select   distinct   *   into   #Tmp   from   tableName 

        drop   table   tableName 

        select   *   into   tableName   from   #Tmp 

        drop   table   #Tmp 

发生这种重复的原因是表设计不周产生的，增加唯一索引列即可解决。 

2、这类重复问题通常要求保留重复记录中的第一条记录，操作方法如下 

        假设有重复的字段为Name,Address，要求得到这两个字段唯一的结果集 

        select   identity(int,1,1)   as   autoID,   *   into   #Tmp   from   tableName 

        select   min(autoID)   as   autoID   into   #Tmp2   from   #Tmp   group   by   Name,Address

        select   *   from   #Tmp   where   autoID   in(select   autoID   from   #tmp2) 

        最后一个select即得到了Name，Address不重复的结果集（但多了一个autoID字段，实际写时可以写在select子句中省去此列） 

or

With Dups as 

(

    select *, row_number() over (partition by Product_Code order by Product_Code) as RowNum 

    from #prod

)

Delete from Dups where rownum > 1;

本文转自齐师傅博客园博客，原文链接：http://www.cnblogs.com/youring2/archive/2012/02/08/sqltips.html，如需转载请自行联系原作者