File robots txt

[beke82]

Ciao a tutti,

avrei bisogno di capire come fare a scrivere un file robots e sapere se questa mia 1° bozza è corretta o meno.

User-agent: *
Disallow: miosito.it
Request-rate: 1/5
Visit-time: 2030-0445

Quello che mi interessa è di fare in modo che miosito.it abbia il file robots attivo dalle 20.30 alle 04-45.
E' corretta questa sintassi o devo apportare delle modifiche?

miosito.it è uno dei domini dell'azienda per cui lavoro ed ha decine di sottodomini attivi.

Grazie a chiunque mi voglia aiutare



PS: Per i mod, spero di averlo scritto nella sezione corretta

[rigby76]

Punto primo, su disallow ci devi mettere la cartella che vuoi escludere e non il nome del dominio (il robots.txt è sempre legato al dominio che lo contiene, e solo ad esso).


Quanto alle direttive Request-rate e Visit-time, ho forti dubbi che Google le prenda in considerazione. Vedi qui, John Mueller è un dirigente di Google USA:
https://productforums.google.com/for...rs/QxtutLr3QNM

[seo2015]

Se scrivi per esempio "check robots.txt" sul motore di ricerca trovi questo:
http://tool.motoricerca.info/robots-checker.phtml

E anche questo, se vuoi analizzare il codice prima di caricarlo:
https://webmaster.yandex.com/robots.xml

Comunque per sapere se Google accetta o no una direttiva, bisognerebbe iscriversi a "strumenti per webmaster" di Google e quindi sottoporre il proprio file robots all'apposito strumento di analisi.

[GianniO]

concordo con quanto detto ma aggiungo di fare molta attenzione quando tratti i file robots!