[supersaibal]Originariamente inviato da MarcoTuscany
Ah......vero
Anche nei dieci comandamenti c'è scritto non rubare, non uccidere, non desiderare la donna d'altri......

Nelle autostrade c'è il limite di velocità.....

Il fatto che GG lo cerchi non vuol dire che lo rispetti.

[/supersaibal]
Sia il file robots.txt che il meta tag robots non sono delle imposizioni per i motori ma delle richieste. Effettivamente bisogna sperare nel "buon senso" dello spider.
Però se consideriamo che i motori di ricerca hanno anche troppe cose da indicizzare e che a volte non indicizzano nemmeno quello che ci interessa, figuriamoci se si vanno a rompere le b.. con quello che non gli chiediamo di indicizzare....
Comunque effettivamente non si può sapere se lo spider rispetterà la richiesta.