Ciao a tutti.
Per caso c'è qualche regolamento che dica come devono comportarsi gli spider?
Intendo: in che orari devono agire, se necessariamente devono tener conto dei robots.txt, quante volte possono effettuare richieste, ecc.
Ciao a tutti.
Per caso c'è qualche regolamento che dica come devono comportarsi gli spider?
Intendo: in che orari devono agire, se necessariamente devono tener conto dei robots.txt, quante volte possono effettuare richieste, ecc.