Senza approfondire troppo, con il robots.txt e G, ci si campa. Quando usate il comando site: e nell' elenco vostre pagine appaiono pagine senza descrizione considerate che quelle comunque occupano uno spazio, e se non ci fossero qello "spazio" nel db sarebbe riempito da altre pagine "utili" del vostro sito. Pertanto vanno subito rimosse. G le rumuove per legge in 24 ore, le grosse societa' hanno un prog apposta (non in commercio) che, ad uopo, mette le sopraddette url dentro il robots.txt e poi forza G a leggere il robots.txt e levarle, cosi' in loop finche' tutto e' pulito (inutile dire che ha sviluppato questo semplice software :)).