e se i motori avessero un limite prefissato nella quantità di pagine da indicizzare?

per il consumo di banda sono pienamente d'accordo con te però i motori sono potenzialmente i tuoi utenti + importanti (te ne porteranno altri insomma)