当前位置: 代码迷 >> SQL >> SQL Server中剔除重复数据的几个方法
  详细解决方案

SQL Server中剔除重复数据的几个方法

热度:89   发布时间:2016-05-05 14:51:30.0
SQL Server中删除重复数据的几个方法

数据库的使用过程中由于程序方面的问题有时候会碰到重复数据,重复数据导致了数据库部分设置不能正确设置……
方法一

ALTER PROCEDURE [dbo].[proc_moss_wm_item_cate_delete]AS	DECLARE @l_count INT 	DECLARE @l_item_code nvarchar(100) BEGIN	--1.删除外贸产品类别重复信息	BEGIN		DECLARE cur_update CURSOR FOR 			SELECT				aud.nvarchar1, COUNT(1) AS num			FROM				dbo.AllUserData aud			WHERE				1 = 1			AND aud.tp_ListId = '98CD4C8F-E130-40DE-B55F-89650FBFE5A6'			--AND aud.nvarchar1 = 'W.ZJ.ZLDS.162.005'			GROUP BY aud.nvarchar1			HAVING COUNT(1)> 1;	END	OPEN cur_update;  FETCH NEXT FROM cur_update INTO @l_item_code, @l_count	WHILE (@@fetch_status = 0)	BEGIN			SELECT @l_count = @l_count - 1			SET ROWCOUNT @l_count 			DELETE FROM dbo.AllUserData WHERE 1 = 1			AND tp_ListId = '98CD4C8F-E130-40DE-B55F-89650FBFE5A6'			AND	nvarchar1 = @l_item_code				FETCH cur_update INTO @l_item_code ,@l_count	END	CLOSE cur_update  DEALLOCATE cur_update	SET ROWCOUNT 0   --2.执行类别一二三更新  EXEC proc_moss_wm_item_price_update_cateEND
?

?


方法二
有两个意义上的重复记录,一是完全重复的记录,也即所有字段均重复的记录,二是部分关键字段重复的记录,比如Name字段重复,而其他字段不一定重复或都重复可以忽略。


1、对于第一种重复,比较容易解决,使用
  select distinct * from tableName
就可以得到无重复记录的结果集。
如果该表需要删除重复的记录(重复记录保留1条),可以按以下方法删除
  select distinct * into #Tmp from tableName
  drop table tableName
  select * into tableName from #Tmp
  drop table #Tmp
发生这种重复的原因是表设计不周产生的,增加唯一索引列即可解决。


2、这类重复问题通常要求保留重复记录中的第一条记录,操作方法如下
  假设有重复的字段为Name,Address,要求得到这两个字段唯一的结果集
  select identity(int,1,1) as autoID, * into #Tmp from tableName
  select min(autoID) as autoID into #Tmp2 from #Tmp group by Name,autoID
  select * from #Tmp where autoID in(select autoID from #tmp2)
  最后一个select即得到了Name,Address不重复的结果集(但多了一个autoID字段,实际写时可以写在select子句中省去此列)

  相关解决方案