Spiegati meglio.
I record duplicati hanno uguali tutti i campi?
In caso contrario in base a quale criterio decidi cosa mantenere e cosa eliminare?