Ciao a tutti.
Per caso c'è qualche regolamento che dica come devono comportarsi gli spider?
Intendo: in che orari devono agire, se necessariamente devono tener conto dei robots.txt, quante volte possono effettuare richieste, ecc.
Ciao a tutti.
Per caso c'è qualche regolamento che dica come devono comportarsi gli spider?
Intendo: in che orari devono agire, se necessariamente devono tener conto dei robots.txt, quante volte possono effettuare richieste, ecc.
No, non esiste.
L'unico regolamento assunto ma non obbligatorio è il robots.txt che però stabilisce proprietà di scansione, non tempi o modi.
Permessi di invio
Rispondi quotando