Sarebbe inutile. I bot cattivi se ne fregano del robots.txt.
estremizzo, banalizzo e polemizzo! Hai letto le FAQ sui Motori di Ricerca?
Regole del Forum