Scusa la domanda forse non è la sezione giusta. Se non lo fosse mi scuso, ma mi chiedevo come posso NON FAR INDICIZZARE un sottodominio.dominio.it? è importante perchè in quel sottodominio ho dei dati importanti. Cosa metto nel robot.txt?
Scusa la domanda forse non è la sezione giusta. Se non lo fosse mi scuso, ma mi chiedevo come posso NON FAR INDICIZZARE un sottodominio.dominio.it? è importante perchè in quel sottodominio ho dei dati importanti. Cosa metto nel robot.txt?
Suppongo che il tuo sottodominio.dominio.it sia una cartella. In questo caso nel robot usa il Disallow.
codice:User-Agent: * Disallow: /sottodominio
ma se invece metto dentro il sottodominio il file robot cosi:
User-Agent: *
Disallow: /
funziona lo stesso giusto?
Sì, sempre che il crawler rispetti queste indicazioni...Originariamente inviato da alex_mac88
ma se invece metto dentro il sottodominio il file robot cosi:
User-Agent: *
Disallow: /
funziona lo stesso giusto?
Volendo, se nel sottodominio ci gira un'app in php, puoi incrementare leggermente la sicurezza andando a leggere il HTTP_USER_AGENT e bloccando quindi il proseguo se non corrisponde ai tipi che tu autorizzi (o se corrisponde ai tipi che vuoi negare)
Permessi di invio
Rispondi quotando