Ok, si puo decidere per ogni user-agent cosa deve poter leggere e cosa no.
Ma se volessi inibire l'accesso a qualsiasi spider/crawler/grabber (se poi qualcuno sa dare una ditinzione.. leggendo qua e la si direbbero la stessa cosa.) che non sia il bot di gg,msn,inktomi slurp e qualche altro?
(questo non per sentirsi aristocratici.. ma per evitare di scrivere un robots lungo piu di un romanzo..)

Rispondi quotando
