如何去除重复（两个或更多字段相同）数据？

[herrojay]

比如说，现在有1张表，3个字段（id，b，c），3条数据（数据a，数据b，数据c）。
且数据b的b和c都要等于数据c的b和c才能断定为重复。
如何找出这样的数据，并且删除重复的，只保留一条。
或者一张表的字段有100个。如何做？谢谢。

[liusong_china]

--重复数据只显示一条：
select min(id) id,b,c from tb group by b,c

--删除重复数据：
delete from tb where rowid not in (select min(rowid) from tb group by b,c);

[herrojay]

[Quote=引用 1 楼 liusong_china 的回复:]
SQL code--重复数据只显示一条：selectmin(id) id,b,cfrom tbgroupby b,c--删除重复数据：deletefrom tbwhere rowidnotin (selectmin(rowid)from tbgroupby b,c);
[/Quote]

能解释下么，数据库我还很生疏。谢谢。

[sky711]

[Quote=引用 2 楼 herrojay 的回复:]
引用 1 楼 liusong_china 的回复:
SQL code--重复数据只显示一条：selectmin(id) id,b,cfrom tbgroupby b,c--删除重复数据：deletefrom tbwhere rowidnotin (selectmin(rowid)from tbgroupby b,c);


能解释下么，数据库我还很生疏。谢谢。
[/Quote]

oracle 中rowid（伪列） 用来唯一标示一行记录
上面的语句按 b, c列分组，并找出每组最小的rowid, 然后其它行的数据删除。

[ACMAIN_CHM]

delete from 1张表 a
where exists (select 1 from 1张表 where 数据b=a.数据b and 数据c=a.数据c and 数据a<a.数据a)

[碧水幽幽泉]

create table test (id number, name varchar2(40));

insert into test(id,mame) values (1,'huangbiquan');

insert into test(id,mame) values (1,'huangbiquan');

insert into test(id,mame) values (1,'huangbiquan');

insert into test(id,mame) values (2,'xiaoquan');

insert into test(id,mame) values (3,'bishui');

insert into test(id,mame) values (4,'youyouquan');

commit;

查询相同记录
1.select * from test t where t.rowid > (select min(x.rowid) from test x where t.id = x.id);
2.select * from test t where t.rowid <> (select max(x.rowid) from test x where t.id = x.id);
3.select count(*),t.id, t.name from test t group by id,name having count(*) > 1;

查询不相同的记录
1.select * from test t where t.rowid <= (select min(x.rowid) from test x where t.id = x.id);
2.select distinct t.* from test t;

删除重复记录
1.delete from test t where t.rowid > (select min(x.rowid) from test x where t.id = x.id);
2.delete from test t where t.rowid <> (select max(x.rowid) from test x where t.id = x.id);


delete from tt
where rowid in(select rd from(
select rowid rd,row_number()over(partition by 字段 order by rownum)rn
from tt)
where rn <>1)

[bobo415]

[Quote=引用 4 楼 acmain_chm 的回复:]
SQL code
delete from 1张表 a where exists (select 1 from 1张表 where 数据b=a.数据 band 数据c=a.数据c and 数据a<a.数据a)
[/Quote]
多条重复的能只剩一条吗

[huangdh12]

相似的问题csdn有很多解答过的。。

[xtb_0129]

一楼的方法可以

[sosqrn975]

<pre>

select * from tb a join(
  select repeatColumnA,repeatColumnB,repeatColumnN from tb
    group by repeatColumnA,repeatColumnB,repeatColumnN
    having count(*)>1
)b on a.repeatColumnA=b.repeatColumnA 
  and a.repeatColumnB=b.repeatColumnB
  and a.repeatColumnN=b.repeatColumnN;

</pre>

[sosqrn975]

[Quote=引用 1 楼 liusong_china 的回复:]
SQL code
--重复数据只显示一条：
select min(id) id,b,c from tb group by b,c

--删除重复数据：
delete from tb where rowid not in (select min(rowid) from tb group by b,c);
[/Quote]

应该在多个字段的情况下会有多余记录产生，我测试了下

多个字段指除了重复的2个字段外其它未查询的字段