Ciao ragazzi/e domanda se io ho una cartella di nome pippo, e non voglio che sia indicizzata come va strutturato il file robot.txt? e dove va messo? dentro quella catella o dentro la root principale dell'ftp?
Ciao ragazzi/e domanda se io ho una cartella di nome pippo, e non voglio che sia indicizzata come va strutturato il file robot.txt? e dove va messo? dentro quella catella o dentro la root principale dell'ftp?
ciao
allora crei un file chiamato robots.txt nella root del tuo sito e inserisci dentro a questo file il seguente codice
User-agent: *
Disallow: /pippo/
Disallow: /nome_directory_bloccare_ai_robots/
Disallow: /nome_altra_directory/
BlkAngel
perfetto grazie mille
Mi inserisco: e se voglio che tutti gli spider ignorino una certa pagina anzichè una directory cosa devo scrivere?
User-agent: *
Disallow: pagina1.asp
Disallow: pagina2.asp
Disallow: pagina3.asp
www.radiana.it - Spartiti musicali e Mp3
forse questa pagina può esserti utile
http://www.robotstxt.org/wc/norobots.html
ciao
dov'è che si può reperire una lista dei SOLI spider nocivi AGGIORNATA? oltre ai 3d del forum, in rete ho dovuto prendere quà e là consigli frammentati, dritte più o meno valide ecc.
Permessi di invio
Rispondi quotando