Sul mio sito ho bloccato col robots.txt l'indicizzazione delle pagine sito/search/ per far si che google non registrasse doppioni di contenuti. Ho anche fatto in modo che qualunque pagina prodotta con url sito/searc/url-ricerca abbia il meta tag robots con il noindex.
Tempo fa mi ha indicizzato comunque un sacco di pagine all'interno della cartella /search/, le ho rimosse ed è andato tutto a buon fine, finalmente non avevo più le pagine indicizzate...
Ora di nuovo, una ventina di pagine /search/![]()
Perché le indicizza sebbene ci sia il blocco del robots.txt ed il blocco del meta tag robots?

Rispondi quotando