IT貓撲網(wǎng):您身邊最放心的安全下載站! 最新更新|軟件分類|軟件專題|手機(jī)版|論壇轉(zhuǎn)貼|軟件發(fā)布

您當(dāng)前所在位置: 首頁(yè)數(shù)據(jù)庫(kù)Oracle → Oracle快速刪除重復(fù)記錄

Oracle快速刪除重復(fù)記錄

時(shí)間:2015-06-28 00:00:00 來(lái)源:IT貓撲網(wǎng) 作者:網(wǎng)管聯(lián)盟 我要評(píng)論(0)

  做項(xiàng)目的時(shí)候,一位同事導(dǎo)數(shù)據(jù)的時(shí)候,不小心把一個(gè)表中的數(shù)據(jù)全都搞重了,也就是說(shuō),這個(gè)表里所有的記錄都有一條重復(fù)的。這個(gè)表的數(shù)據(jù)是千萬(wàn)級(jí)的,而且是生產(chǎn)系統(tǒng)。也就是說(shuō),不能把所有的記錄都刪除,而且必須快速的把重復(fù)記錄刪掉。

  對(duì)此,總結(jié)了一下刪除重復(fù)記錄的方法,以及每種方法的優(yōu)缺點(diǎn)。

  為了陳訴方便,假設(shè)表名為Tbl,表中有三列col1,col2,col3,其中col1,col2是主鍵,并且,col1,col2上加了索引。

  1、通過(guò)創(chuàng)建臨時(shí)表

  可以把數(shù)據(jù)先導(dǎo)入到一個(gè)臨時(shí)表中,然后刪除原表的數(shù)據(jù),再把數(shù)據(jù)導(dǎo)回原表,SQL語(yǔ)句如下:

  creat table tbl_tmp (select distinct* from tbl);

  truncate table tbl;//清空表記錄

  insert into tbl select * from tbl_tmp;//將臨時(shí)表中的數(shù)據(jù)插回來(lái)。

  這種方法可以實(shí)現(xiàn)需求,但是很明顯,對(duì)于一個(gè)千萬(wàn)級(jí)記錄的表,這種方法很慢,在生產(chǎn)系統(tǒng)中,這會(huì)給系統(tǒng)帶來(lái)很大的開銷,不可行。

  2、利用rowid

  在oracle中,每一條記錄都有一個(gè)rowid,rowid在整個(gè)數(shù)據(jù)庫(kù)中是唯一的,rowid確定了每條記錄是oracle中的哪一個(gè)數(shù)據(jù)文件、塊、行上。在重復(fù)的記錄中,可能所有列的內(nèi)容都相同,但rowid不會(huì)相同。SQL語(yǔ)句如下:

  delete from tbl where rowid in (select a.rowid from tbl a, tbl b where a.rowid>b.rowid and a.col1=b.col1 and a.col2 = b.col2)

  如果已經(jīng)知道每條記錄只有一條重復(fù)的,這個(gè)sql語(yǔ)句適用。但是如果每條記錄的重復(fù)記錄有N條,這個(gè)N是未知的,就要考慮適用下面這種方法了。

  3、利用max或min函數(shù)

  這里也要使用rowid,與上面不同的是結(jié)合max或min函數(shù)來(lái)實(shí)現(xiàn)。SQL語(yǔ)句如下

  delete from tbl a where rowid not in (select max(b.rowid) from tbl b where a.col1=b.col1 and a.col2 = b.col2);//這里max使用min也可以

  或者用下面的語(yǔ)句

  delete from tbl a where rowid < (select max(b.rowid) from tbl b where a.col1=b.col1 and a.col2 = b.col2);//這里如果把max換成min的話,前面的where子句中需要把"<"改為">"

  跟上面的方法思路基本是一樣的,不過(guò)使用了group by,減少了顯性的比較條件,提高效率。SQL語(yǔ)句如下:

  delete from tbl where rowid not in (select max(rowid) from tbl t group by t.col1, t.col2 );

  delete from tbl where (col1, col2) in (select col1,col2 from tbl group by col1,col2 having? count(*) > 1) and rowid? not in (select? nin(rowid) from tbl group by col1,col2 having? count(*) > 1)

  還有一種方法,對(duì)于表中有重復(fù)記錄的記錄比較少的,并且有索引的情況,比較適用。假定col1,col2上有索引,并且tbl表中有重復(fù)記錄的記錄比較少,SQL語(yǔ)句如下4、利用group by,提高效率

關(guān)鍵詞標(biāo)簽:Oracle刪除重復(fù)記錄

相關(guān)閱讀

文章評(píng)論
發(fā)表評(píng)論

熱門文章 Oracle中使用alter table來(lái)增加,刪除,修改列的語(yǔ)法 Oracle中使用alter table來(lái)增加,刪除,修改列的語(yǔ)法 oracle中使用SQL語(yǔ)句修改字段類型-oracle修改SQL語(yǔ)句案例 oracle中使用SQL語(yǔ)句修改字段類型-oracle修改SQL語(yǔ)句案例 誤刪Oracle數(shù)據(jù)庫(kù)實(shí)例的控制文件 誤刪Oracle數(shù)據(jù)庫(kù)實(shí)例的控制文件 為UNIX服務(wù)器設(shè)置Oracle全文檢索 為UNIX服務(wù)器設(shè)置Oracle全文檢索

相關(guān)下載

    人氣排行 oracle中使用SQL語(yǔ)句修改字段類型-oracle修改SQL語(yǔ)句案例 Oracle中使用alter table來(lái)增加,刪除,修改列的語(yǔ)法 ORACLE SQL 判斷字符串是否為數(shù)字的語(yǔ)句 ORACLE和SQL語(yǔ)法區(qū)別歸納(1) oracle grant 授權(quán)語(yǔ)句 ORACLE修改IP地址后如何能夠使用 如何加速Oracle大批量數(shù)據(jù)處理 Oracle刪除表的幾種方法