Tìm bản ghi trùng lặp trong trường bằng ArcGIS cho Máy tính để bàn?

Tôi đang tìm các bản ghi trùng lặp trong các tệp dbf dựa trên thuộc tính được gọi là 'ID'. Tôi có các tệp dbf khác nhau từ 500.000 bản ghi đến 1,5 triệu và tôi biết có một loạt các bản sao.

Tôi muốn thêm một trường 'Sao y' có nghĩa là Có hoặc Không (hoặc 1 hoặc 0 là tốt) khi thuộc tính ID có mặt ở nơi khác. Sử dụng tập lệnh python sau đây trong Máy tính trường trả về 1 cho mục nhập trùng lặp và 0 cho mục nhập duy nhất;

uniqueList = []
def isDuplicate(inValue):
  if inValue in uniqueList:
    return 1
  else:
    uniqueList.append(inValue)
    return 0
isDuplicate(!FIELD_NAME!)

Tuy nhiên, bản ghi đầu tiên của, ví dụ, 5 ID trùng lặp cũng sẽ được trả về là 0 (4 bản tiếp theo được coi là bản sao). Tôi sẽ cần tất cả 5 để được đánh dấu là trùng lặp vì ID tồn tại ở nơi khác.

Sử dụng mã sau đây sẽ cung cấp cho bạn tổng số lần tăng của số lần ID đó xảy ra với 1 lần nghĩa là lần đầu tiên và vv;

UniqueDict = {}
def isDuplicateIndex(inValue):
    UniqueDict.setdefault(inValue,0)
    UniqueDict[inValue] += 1
    return UniqueDict[inValue]

isDuplicateIndex( !YOUR_FIELD! )

Tôi chỉ muốn 1 (hoặc Có) nếu ID của hồ sơ đó tồn tại ở nơi khác! (Phiên bản ArcGIS 10.1)

Tôi đã thấy các câu trả lời khác như tập lệnh Python để xác định các bản ghi trùng lặp (theo dõi) nhưng nó không hoạt động.

Một giải pháp thay thế là sử dụng công cụ " thống kê tóm tắt " hiện có trong ArcGIS, sau đó bạn tham gia bảng kết quả dựa trên trường ID của bạn. Các bản sao sẽ có "COUNT" lớn hơn 1, do đó, thật đơn giản để tính toán nó với máy tính trường của bạn.

Một giải pháp thay thế khác ( chỉ hoạt động với môi trường SDE ) là sử dụng chức năng SQL hiện có trong ArcGIS để hiển thị các bản ghi trùng lặp

Nhận bản ghi trùng lặp trong bảng (Chọn theo thuộc tính)

[FIELD_NAME] In (SELECT [FIELD_NAME] FROM [TABLE_NAME] GROUP BY [FIELD_NAME] HAVING Count(*)>1 )

Thí dụ:

ID In (SELECT ID FROM GISDATA.MY_TABLE GROUP BY ID HAVING Count(*)>1 )

Kịch bản sau đây tạo một trường mới với số lần xuất hiện của mỗi giá trị từ một trường được chỉ định. Vì vậy, đối với ex, nếu bạn có "Paris" 6 lần trong lĩnh vực đó, mỗi hàng với "Paris" sẽ nhận được 6.

import arcpy

arcpy.env.workspace=r"D:\test.gdb"
infeature="sample_feature"
field_in="sample_field"
field_out="COUNT_"+field_in

#create the field for the count values
arcpy.AddField_management(infeature,field_out,"SHORT")

#creating the list with all the values in the field, including duplicates
lista=[]
cursor1=arcpy.SearchCursor(infeature)
for row in cursor1:
    i=row.getValue(field_in)    
    lista.append(i)
del cursor1, row

#updating the count field with the number on occurrences of field_in values
#in the previously created list
cursor2=arcpy.UpdateCursor(infeature)
for row in cursor2:
    i=row.getValue(field_in)
    occ=lista.count(i)   
    row.setValue(field_out,occ)
    cursor2.updateRow(row)
del cursor2, row
print ("Done.")

Nó có thể dễ dàng sửa đổi để bạn có thể có "Có" hoặc 1 nếu đếm> 1, nhưng tôi đoán rằng việc có số đếm thực tế sẽ hữu ích hơn.

Chỉnh sửa sau: Hoặc bạn có thể sử dụng điều này trong máy tính trường. Mã kịch bản tiền logic:

infeature="sample_feature" #change with the name of your feature
lista=[]
field="sample_field" #change with your field with duplicates
cursor1=arcpy.SearchCursor(infeature)
for row in cursor1:
    i=row.getValue(field)    
    lista.append(i)
del cursor1, row

def duplicates(field_in):        
    occ=lista.count(field_in)
    return occ

trường trùng lặp =

duplicates(!sample_field!)