Utilizzando le statistiche nel proprio sito.
Prova a cercare su Google i servizi che offrino il rilevamento degli spider/crawler.
Occhio pero' che tanti servizi gratis inseriscono dei dialer, stare molto lontano da simili, leggi sempre le Condizioni del servizio!