Negare l'indicizzazione del sito in tutti i motori

[trippacchiello]

Sto facendo un sito nuovo e stavolta mi pongo il quesito al contrario.
C'e' un modo in cui questo sito non sara' mai inserito nei motori?
Mi serve perche' voglio utilizzare il db di un altro sito e quindi copiarlo e non vorrei che poi mi penalizzi il sito principale per copia...
basta un noindex e noarchive? o questo vale solo per google?

[Petro_suse91]

User-agent: *
Disallow: /

[trippacchiello]

Originariamente inviato da Petro_suse91
User-agent: *
Disallow: /

ma e' sicura come cosa?
non e' che se per esempio tu ricevo qualche link da qualche sito queste pagine vengono inserite nei motori di ricerca?

[Petro_suse91]

Tranquillo, tutti i motori di ricerca seri obbediscono alle istruzioni espresse nel file robots.txt.

Per imparare a maneggiare questo potente strumento, consulta: http://www.robotstxt.org/robotstxt.html

[trippacchiello]

Originariamente inviato da Petro_suse91
Tranquillo, tutti i motori di ricerca seri obbediscono alle istruzioni espresse nel file robots.txt.

Per imparare a maneggiare questo potente strumento, consulta: http://www.robotstxt.org/robotstxt.html

ok grazie, lo usero'