Ciao a tutti, ho un affluenza di robots che si bloccano tutti alla pagina www.capoliverionline.it/snitz/cal.asp il problema è che anche nelle statistiche di google sitemaps, mi rileva dei problemi in questo file ma digitandolo nella barra funziona benissimo.
Vorrewi chiedervi quali tra questi robots e relativi accessi al mio sito dovrei vietare l'accesso?:

Google 1464
MSN 1349
Inktomi 1192
WiseNutBot 727
Mediapartners-Google 626
crawler 491
Gigablast 271
OmniExplorer_Bot 166
jyxobot 99
ichiro 96
ia_archiver 63
LinkWalker 53
Wanadoo 53
WebReaper 42
bot 36
crawlerinfo 35
whatUseek_winona 33
e-SocietyRobot 33
ConveraCrawler 28
Linux 24
crawl 16
robot 9
miragorobot 7
::_detectURL 4
libwww-perl 4
travelbot 4
aipbot 3
ccubee 2
ASPseek 2
MVAClient 2

Grazie Andrea