oracle重複資料的查詢及刪除
---->>轉載於:
重複的資料可能有這樣兩種情況,第一種: 表中只有某些欄位一樣,第二種是兩行記錄完全一樣。
一、對於部分欄位重複資料的刪除
1.查詢重複的資料
select 欄位1,欄位2, count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1
例:Select owner from dba_tables group by owner having count(*)>1;
Select owner from dba_tables group by owner having count(*)=1; //查詢出沒有重複的資料
2.刪除重複的資料
delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1)
這種刪除執行的效率非常低,對於大資料量來說,可能會將資料庫吊死。
另一種高效率的方法是先將查詢到的重複的資料插入到一個臨時表中,然後再進行刪除。
CREATE TABLE 臨時表 AS
(
select 欄位1,欄位2, count(*) as row_num
from 表名
group by 欄位1,欄位2
having count(*) > 1
);
上面這句話就是建立了臨時表,並將查詢到的資料插入其中。
下面就可以進行這樣的刪除操作了:
delete from 表名 a
where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表);
3.保留重複資料中最新的一條記錄
在Oracle中,rowid是隱藏欄位,用來唯一標識每條記錄。所以,只要保留重複資料中rowid最大的一條記錄就可以了。
查詢重複資料:
select a.rowid,a.* from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 );
例:selete from dba_tables a
where a.rowid!=(
select max(rowid) from test b
where a.owner=b.owner);
刪除重複資料,只保留最新的一條資料:
delete from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 )
使用臨時表實現高效查詢
create table 臨時表 as
(select a.欄位1, a.欄位2, MAX(a.ROWID) as dataid from 正式表 a
GROUP BY a.欄位1,a.欄位2);
delete from 表名 a
where a.rowid !=
( select b.dataid from 臨時表 b
where a.欄位1 = b.欄位1 and
a.欄位2 = b.欄位2 );
commit;
二、對於完全重複記錄的刪除
對於表中兩行記錄完全一樣的情況,可以用下面語句獲取到去掉重複資料後的記錄:
select distinct * from 表名
可以將查詢的記錄放到臨時表中,然後再將原來的表記錄刪除,最後將臨時表的資料導回原來的表中。如下:
CREATE TABLE 臨時表 AS (select distinct * from 表名);
drop table 正式表;
insert into 正式表 (select * from 臨時表);
drop table 臨時表; 假如想刪除一個表的重複資料,可以先建一個臨時表,將去掉重複資料後的資料匯入到臨時表,然後在從臨時表將資料匯入正式表中,如下: INSERT INTO t_table_bak
select distinct * from t_table;
重複的資料可能有這樣兩種情況,第一種: 表中只有某些欄位一樣,第二種是兩行記錄完全一樣。
一、對於部分欄位重複資料的刪除
1.查詢重複的資料
select 欄位1,欄位2, count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1
例:Select owner from dba_tables group by owner having count(*)>1;
Select owner from dba_tables group by owner having count(*)=1; //查詢出沒有重複的資料
2.刪除重複的資料
delete from 表名 a where 欄位1,欄位2 in (select 欄位1,欄位2,count(*) from 表名 group by 欄位1,欄位2 having count(*) > 1)
這種刪除執行的效率非常低,對於大資料量來說,可能會將資料庫吊死。
另一種高效率的方法是先將查詢到的重複的資料插入到一個臨時表中,然後再進行刪除。
CREATE TABLE 臨時表 AS
(
select 欄位1,欄位2, count(*) as row_num
from 表名
group by 欄位1,欄位2
having count(*) > 1
);
上面這句話就是建立了臨時表,並將查詢到的資料插入其中。
下面就可以進行這樣的刪除操作了:
delete from 表名 a
where 欄位1,欄位2 in (select 欄位1,欄位2 from 臨時表);
3.保留重複資料中最新的一條記錄
在Oracle中,rowid是隱藏欄位,用來唯一標識每條記錄。所以,只要保留重複資料中rowid最大的一條記錄就可以了。
查詢重複資料:
select a.rowid,a.* from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 );
例:selete from dba_tables a
where a.rowid!=(
select max(rowid) from test b
where a.owner=b.owner);
刪除重複資料,只保留最新的一條資料:
delete from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.欄位1 = b.欄位1 and a.欄位2 = b.欄位2 )
使用臨時表實現高效查詢
create table 臨時表 as
(select a.欄位1, a.欄位2, MAX(a.ROWID) as dataid from 正式表 a
GROUP BY a.欄位1,a.欄位2);
delete from 表名 a
where a.rowid !=
( select b.dataid from 臨時表 b
where a.欄位1 = b.欄位1 and
a.欄位2 = b.欄位2 );
commit;
二、對於完全重複記錄的刪除
對於表中兩行記錄完全一樣的情況,可以用下面語句獲取到去掉重複資料後的記錄:
select distinct * from 表名
可以將查詢的記錄放到臨時表中,然後再將原來的表記錄刪除,最後將臨時表的資料導回原來的表中。如下:
CREATE TABLE 臨時表 AS (select distinct * from 表名);
drop table 正式表;
insert into 正式表 (select * from 臨時表);
drop table 臨時表; 假如想刪除一個表的重複資料,可以先建一個臨時表,將去掉重複資料後的資料匯入到臨時表,然後在從臨時表將資料匯入正式表中,如下: INSERT INTO t_table_bak
select distinct * from t_table;
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/29119536/viewspace-1098766/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- oracle 查詢及刪除表中重複資料Oracle
- Oracle查詢重複資料與刪除重複記錄Oracle
- mysql 查詢及 刪除表中重複資料MySql
- Oracle查詢重複資料與刪除重複記錄方法Oracle
- mysql查詢表裡的重複資料方法和刪除重複資料MySql
- Oracle中刪除重複資料的SqlOracleSQL
- Oracle 查詢並刪除重複記錄的SQL語句OracleSQL
- 刪除重複資料
- 查詢刪除表中重複記錄
- oracle 刪除重複資料的幾種方法Oracle
- mongodb刪除重複資料MongoDB
- MySQL刪除重複資料MySql
- ORACLE批量刪除無主鍵重複資料Oracle
- Oracle 刪除重複資料只留一條Oracle
- 回閃查詢查詢刪除的資料
- MySQL 查詢重複的資料MySql
- 處理表重複記錄(查詢和刪除)
- 刪除oracle重複值Oracle
- 刪除表裡重複資料
- sqlserver中刪除重複資料SQLServer
- 轉載:Oracle中查詢和刪除重複記錄方法簡介Oracle
- mysql 刪除表中重複的資料MySql
- 查詢/刪除重複的資料(單個欄位和多個欄位條件)
- oracle刪除重資料方法Oracle
- 刪除Oracle重複記錄Oracle
- oracle刪除重複記錄Oracle
- PostgreSQL刪除表中重複資料SQL
- 解析postgresql 刪除重複資料案例SQL
- oracle 快速刪除大批量資料方法(全部刪除,條件刪除,刪除大量重複記錄)Oracle
- Oracle閃回查詢恢復delete刪除資料Oracledelete
- 【TABLESPACE】Oracle資料庫預設永久表空間的查詢及刪除方法Oracle資料庫
- Mongodb 刪除重複資料的幾個方法MongoDB
- 刪除重複資料的幾個方法(轉)
- oracle 快速刪除大批量資料方法(全部刪除,條件刪除,刪除大量重複記錄) 轉Oracle
- 【轉】oracle 快速刪除大批量資料方法(全部刪除,條件刪除,刪除大量重複記錄)Oracle
- MS SQL Server 刪除重複行資料SQLServer
- T-SQL 刪除重複資料SQLSQL
- 海量資料處理_刪除重複行