il crawler individua, lo spider preleva.

Ma credo che Low (ed altri, naturalmente) riescano a spiegarlo meglio di me in parole povere.