User-agent: *
Disallow: /
Con questo codice blocchi tutti i motori (e altri sistemi automatici) su tutte le pagine.