Salve, vorrei sapere se esiste un sistema per visualizzare quali crawler hanno ispezionato il sito internet.
Ho letto che si dovrebbe usare la stringa User-Agent, ma sinceramente non so come utilizzarla e dove.

Potreste aiutarmi?

Grazie