No scusa ancora una cosa.

se io inserisco un file robots.txt nella root principale tipo:

User-Agent: *

Disallow: /archivio/

proteggo anche le sottocartelle inserite dentro archivio?

cioè archiovio/cartella1/pippo.pdf ???

ciao e grazie