Secondo voi nel file robots è meglio dire agli spider di non prelevare i css e le immagini o secondo voi è meglio far
prelevare proprio tutto? cosa mi consigliate?
Può anche essere messo se ce già il <meta name="robots">?
E' vantaggioso usarlo o no?
grazie mille
Le mie richieste qui sul forum sono al 99,9% considerate assurde e senza senso, ma per me un senso lo hanno e gradirei una risposta più seria possibile. Grazie
il robots.txt è uno standard, serve per istruire i bot, quindi va usato di conseguenza
se sei disposto\a a farti indicizzare tutto allora non metti in disallow nulla, altrimenti ci metti le immagini ecc ecc
Permessi di invio
Rispondi quotando