esattamente quali pagine?

[kuma13]

Ciao a tutti.
Sapete come si fa a sapere esattamente quali pagine gli spiders indicizzano?
Le mie statistiche sono molto precise ma mi dicono solo quale spider è passato e la data.

esempio:
Googlebot
40 448.20 KB
25 Set 2006 / 17:44

Yahoo Slurp
23 260.37 KB
24 Set 2006 / 09:21

MSNBot
10 97.57 KB
16 Set 2006 / 01:47


Ma io vorrei sapere QUALI pagine ha indicizzato.

Grazie
kuma

[weppos]

Devi trovare un log analyzer che lo faccia oppure analizzarti manualmente i log.
L'ultima ipotesi è di creare un piccolo script che ti segnali quando sul sito è passato Google e su quali pagine.