Originariamente inviato da gigyz
esiste il robot.txt che è stato fatto apposta, è aggirabile ma è una osluzione a costo 0
imho, non serve per quello che vuole lui, robots.txt viene usato dagli spider del motore per sapere cosa non indicizzare con il wget del file in oggetto non se ne fa niente....