查找重復數(shù)據(jù)方法

1、數(shù)據(jù)處理查找重復方法總結在數(shù)據(jù)處理過程中，我們可能會遇到有重復數(shù)據(jù)的情況，下面主要針對數(shù)據(jù)重復查找總結以下幾種方法：一、 同一數(shù)據(jù)層中查找重復1.按照查找頻數(shù)查重復（前提：重復數(shù)據(jù)屬性中有相同字段）圖 1如上圖（圖1），通過屬性表可以看出一共7條數(shù)據(jù)，但是圖形只有6個。主要就是圖形覆蓋了（此處主要是圖形完全一樣所致）；我們可以通過查找屬性的頻數(shù)即可快速查找出重疊的圖像。首先在ArcToolBox工具箱中，找到分析工具Analysis Tool/Statistics/Frequency（查找頻數(shù)工具）；如圖2。圖 2左鍵單擊Frequency工具，出現(xiàn)如下圖（圖3）窗口：圖 3點擊OK按鈕即可統(tǒng)

2、計，待屏幕右下角出現(xiàn)下圖時，說明統(tǒng)計完成。此時，ArcMap會自動將統(tǒng)計結果表加載進來，右鍵點擊統(tǒng)計表，打開該表，如下圖（圖4）：圖 4選中Frequency列，右鍵進行排序(一般按照降序排列)，F(xiàn)requency列數(shù)值1,即可能為重復數(shù)據(jù)（a.重復數(shù)據(jù)；b.圖形完全壓蓋的數(shù)據(jù)）；如圖5：圖 5接下來，自己可以通過相關字段進行快速查找判斷、如果數(shù)據(jù)重復刪除即可，在處理結束后建議再次統(tǒng)計頻數(shù)，確保無重復數(shù)據(jù)后方可。2.通過拓撲進行查找重復數(shù)據(jù)；首先通過ArcCatalog建立拓撲規(guī)則。（仍然以上述練習數(shù)據(jù)為例）拓撲的建立必須在數(shù)據(jù)庫中，shp數(shù)據(jù)無法建立拓撲；如果為shp數(shù)據(jù)可以先將shp數(shù)據(jù)導

3、入.mdb數(shù)據(jù)庫中，再進行操作。找到將要建立拓撲的數(shù)據(jù)所在的數(shù)據(jù)集，右鍵點擊該數(shù)據(jù)集，選擇New/Topology開始建立拓撲關系。如下圖（圖6）：圖 6具體建立拓撲關系的步驟如下:I.在上一步點擊Topology之后，進入建立拓撲規(guī)則界面；如下圖（圖6-1） 圖 6-1II.此處，點擊下一步即可，進入建立拓撲容差見面，一般我們容差設定為0.001(容差越小，精度越高)；如下圖（圖6-2） 圖 6-2III.點擊下一步，即可勾選需要建立拓撲關系的要素層；如圖6-3； 圖 6-3IV.接下來點擊下一步，在設定登記時我們保持默認的等級，Rank:5點擊下一步即可；進入添加rule界面；如圖6-4；

4、圖 6-4V:點擊Add Rule之后，進入選擇拓撲規(guī)則界面，此處可以選擇需要建立拓撲的要素層、拓撲關系等，如下圖6-5；圖 6-5關于拓撲關系有以下一些，可作參考（主要是多邊形拓撲，點線拓撲暫未列入）：a.must not overlay:單要素類，多邊形要素相互不能重疊；b.must not have gaps:單要素類，連續(xù)連接多邊形區(qū)域中間不能有空白區(qū)；c.must be covered by:多邊形+多邊形,第一個多邊形層必須把第二個完全覆蓋(如:全國與省的關系)；d.must be covered by feature class of:多邊形+多邊形，第一個多邊形層被第二個完全覆

5、蓋；e.must not overlay with:多邊形+多邊形，兩個多邊形層的多邊形不能存在一對相互覆蓋的要素；f.must cover each other:多邊形+多邊形,兩個多邊形的要素必須完全重疊；g.area boundary must be covered by boundary of:多邊形+多邊形，第一個多邊形的各要素必須為第二個的一個或多個多邊形完全覆蓋；VI.在選擇Rule之后，點擊下一步，直到出現(xiàn)Finish結束；在Arc Catalog 中出現(xiàn)建立好的拓撲關系；如圖7所示：圖 7VII.通過ArcMap加載上面建立好的拓撲關系層，即可通過建立的拓撲規(guī)則找出重復；3.

6、通過位置選擇進行查找重復、覆蓋數(shù)據(jù)打開ArcMap,加載需要查找是否有重復、壓蓋地塊的兩個圖層，可以適當?shù)恼{整一下要素的符號；在ArcMap菜單欄中找到Selection-Select by location選項；點擊Select by location，彈出下面窗口，如圖7-1所示：圖 7-1 此處，原要素層和目標層選擇同一數(shù)據(jù)層，在Spatial selection method for target layer feature(s)下拉列表中選擇Are identical to the source layer feature，點擊Apply選項即可查查找出同一數(shù)據(jù)層中的重復數(shù)據(jù)，重復數(shù)

7、據(jù)以選中狀態(tài)顯示。（下面兩個圖層進行查找重復針對此種方法有詳細說明）。二、 不同數(shù)據(jù)層（要素層）中查找重復數(shù)據(jù)1.通過拓撲查找重復此處不再做詳細介紹，步驟方法和上面同一數(shù)據(jù)層方法一樣，只用更改Rule即可；針對多邊形建立拓撲的幾種關系本文檔前面已經介紹，此處略過；2.通過空間位置進行查找重復、圖形覆蓋數(shù)據(jù)打開ArcMap,加載需要查找是否有重復、壓蓋地塊的兩個圖層，可以適當?shù)恼{整一下要素的符號；在ArcMap菜單欄中找到Selection-Select by location選項；如圖8所示：圖 8點擊Select by location，彈出下面窗口，如圖9：圖 9在如圖9中所示，Selec

8、tion method下拉列表有以下四個選項：select feature from 從目標要素層中選擇要素（系統(tǒng)默認選項）add to the currently selected features in 添加到當前選擇的要素層remove from the currently selected features in 從當前選擇的要素層中刪除select from the currently selected features in 從當前選擇的要素層中選擇在Spatial selection method for target layer feature(s)下拉列表中有以下幾個較為常見

9、的方法：Intersect the source layer feature 要素層與目標要素層中有相交覆蓋的圖形Are within a distance of the source layer feature在目標要素層中一定范圍內（需設定范圍）Contain the source layer feature 包含有目標要素層中要素Competely contain the source layer feature 包含目標要素層中所有要素Are within the source layer feature 包含于目標要素層中Are competely within the source layer feature 完全包含于目標要素層中Are identical to the source layer feature 兩個圖層中含有完全相同要素選擇適當?shù)陌凑瘴恢眠M行查找的方法，即可快速的得出相應的結論。下面以查找出兩個要素層中含有完全相同數(shù)據(jù)為例。我們選擇Are identical to the so