nascondere cartelle ai motori di ricerca

[koln]

Ciao a tutti.
Come posso nascondere il contenuto di una cartella (contenente sottocartelle e files tipo .pdf e .doc ecc.) a tutti i motori di ricerca?

[fra_975]

usando il file robots.txt, fai una ricerca trovi parecchi 3d in merito, ad es questo

preoccupati anche di "fermare " lo spider sui link che puntano a quelle cartelle che vuoi che non si vedano con l'attributo rel="nofollow" nel tag <a>