Ho controllato il log del mio sito, e sorprese delle sorprese, ho visto che Googlebot visita il mio sito, ma è come se facesse la scansione di directory inesistenti ormai da mesi e mesi....anzi da quasi un anno!!!!Come posso "aggiornarlo" e non fargli fare quella scansione?
Log:
2006-10-09 06:37:01 GET /directory/cat.asp - 66.249.72.111 HTTP/1.1 Mozilla/5.0+(compatible;+Googlebot/2.1;++http://www.google.com/bot.html) - 404 1795
Se 404 è l'errore...perchè pur non trovandola, insiste a cercarla??![]()
![]()