Pagine indicizzate, perché? :(

[Virgilio_x]

Sul mio sito ho bloccato col robots.txt l'indicizzazione delle pagine sito/search/ per far si che google non registrasse doppioni di contenuti. Ho anche fatto in modo che qualunque pagina prodotta con url sito/searc/url-ricerca abbia il meta tag robots con il noindex.
Tempo fa mi ha indicizzato comunque un sacco di pagine all'interno della cartella /search/, le ho rimosse ed è andato tutto a buon fine, finalmente non avevo più le pagine indicizzate...
Ora di nuovo, una ventina di pagine /search/

Perché le indicizza sebbene ci sia il blocco del robots.txt ed il blocco del meta tag robots?

[Virgilio_x]

up

[rigby76]

Non scorgo elementi per dare una valutazione della cosa; posta almeno il contenuto del robots.txt. Può darsi comunque che sia un bug di Google.

[Virgilio_x]

User-agent: *
Disallow: /search/


Nelle pagine in questione c'è anche il metatag
<meta name="robots" content="noindex, follow" />

Perciò lo spider dovrebbe essere bloccato sia dal file robots.txt che dal meta tag e invece niente...
Io richiedo l'eliminazione dagli indici di url /search/... , vengono accettate ed il comando site non ne restituisce nemmeno una ma dopo pochi giorni ricominciano ad indicizzarsi...

[rigby76]

Nel robots indubbiamente non ci sono molti margini di errore; tramite webmaster tools comunque riesci a verificare che le pagine siano effettivamente bloccate dal robots? C'è una sezione per fare i test.

Inoltre, tramite i log del server sei in grado di verificare se lo spider di Google ha richiesto le pagine in questione recentemente?