Oracle数据库中去除重复数据的解决方案

在平时的开发中，我们经常会遇到数据表中出现重复数据的情况，那么如何解决呢？这里介绍两种重复数据删除方法。第一，完全重复数据去重；第二，一些字段数据是重复的。

一、完全重复数据去重方法

对于表中的完全重复数据删除，可以使用以下SQL语句。

密码

将' # temp '创建为(从表名中选择distinct *)；-创建一个临时表，并将不同重复数据删除后的数据插入临时表。

TruncateTABLE表名；-清除原始表数据。

INSERTINTO表名(SELECT * FROM ' # temp ')；-将临时表数据插入到原始表中。

drop table“# temp”；-删除临时表

具体的思路是首先创建一个临时表，然后将不同的表数据插入到这个临时表中；然后清除原始表格数据；先说把临时表中的数据插入到原始表中；最后，删除临时表。

二、部分数据去重方法

首先查找重复数据。

Select字段1，字段2，count(*)from表名groupby字段1，字段2具有count(*) 1

将上面的数字改为=以找出没有重复的数据。

要删除这些重复数据，可以使用以下语句：

从表名a中删除，其中字段1，字段2

(select字段1，字段2，count(*)from table name groupby字段1，字段2havingcount(*) 1)

上面的语句很简单，就是删除查询到的数据。但是这种删除的效率很低，对于大量的数据，可能会卡数据库。

基于以上情况，可以先将找到的重复数据插入到临时表中，然后再删除。这样删除的时候就不用再查询了。如下所示：

将临时表创建为

(select字段1，字段2，count(*)from table name groupby字段1，字段2havingcount(*) 1)

以下可以是这样的删除操作：

delete from table name a where field 1，field 2in(从临时表中选择field 1，field 2in

在删除之前构建一个临时表比用一条语句直接删除要高效得多。

上述语句将删除所有重复项。在oracle中，有一个隐藏的自动rowid，它给每条记录一个唯一的rowid。如果我们想保留最新的记录，我们可以使用这个字段来保留重复数据中rowid最大的记录。

下面是一个查询重复数据的示例：

从表名a中选择a.rowid，a. *

wherea.rowid！=

（

来自表名b的Max (b.rowid)

在那里。字段1=B .字段1和

A.字段2=B .字段2

)

上面括号中的语句是为了找出重复数据中rowid最大的记录。在外面，我们可以找出除了最大的rowid之外的其他重复数据。

因此，我们希望删除重复的数据，只保留最新的数据，所以我们可以这样写：

从表名a中删除

wherea.rowid！=

（

来自表名b的Max (b.rowid)

在那里。字段1=B .字段1和

A.字段2=B .字段2

)

同样，上述代码的执行效率毕竟较低，可以考虑建立一个临时表，将需要判断为重复的字段和rowid插入到临时表中，然后在删除时进行比较。

将临时表创建为

从形式表aGROUPBYa中选择a .字段1，a .字段2，MAX(a . ROWID)dataid。场1，a .场2；

从表名a中删除

wherea.rowid！=

（

从临时表b中选择b . dataid

在那里。字段1=B .字段1和

A.字段2=B .字段2

);

提交；