Originariamente inviato da Ferro9
Lo spider di Google considera solo i primi 100 kb della pagina, ma questo non significa che non la scarichi tutta.
Scusa, e questo dvoe l'hai letto?
Non mi risulta.

Cmq sì, è la stessa cosa per gli spider, qualsiasi spider dato che ogni client che richiama un file consuma banda.
E' però da considerare che gli spider generalmente ignorano il richiamo di immagini, css, allegati js e simili (non tutti e secondo eccezioni) per cui logicamente dovrai escludere al consumo i comportamenti di ognuno.