PDA

Visualizza la versione completa : File robots.txt e contenuto


luisa227
20-07-2005, 23:46
Secondo voi nel file robots meglio dire agli spider di non prelevare i css e le immagini o secondo voi meglio far

prelevare proprio tutto? cosa mi consigliate?
Pu anche essere messo se ce gi il <meta name="robots">?
E' vantaggioso usarlo o no?
grazie mille

uMoR
20-07-2005, 23:59
il robots.txt uno standard, serve per istruire i bot, quindi va usato di conseguenza

se sei disposto\a a farti indicizzare tutto allora non metti in disallow nulla, altrimenti ci metti le immagini ecc ecc

Loading