Ciao a tutti,
ho usato il robots txt per evitare che i motori leggessero alcuni file e cartelle, guardando l'indicizzazzione su google mi sono accorto che mi ha indicizzato anche dei file che avevo specificato nel robots.txt, mi sembra impossibile...ma è così....
codice:User-agent: * # Non voglio che i motori di ricerca ficchino il naso nelle seguenti directory e file. Disallow: /css/ Disallow: /db_documents/ Disallow: /edit_database/ Disallow: /flash/ Disallow: /images/ Disallow: /include/ Disallow: /js/ Disallow: /mailinglist/ Disallow: /mdb-database/ Disallow: /restricted_area/ Disallow: /st/ Disallow: /temp/ Disallow: /download/ Disallow: /include/ Disallow: /W3svc450/ Disallow: /users_manager/ Disallow: /admin.asp Disallow: /gfile.asp Disallow: /image.asp Disallow: /products.asp Disallow: /usedlaser.asp Disallow: /menusx.asp Disallow: /newsletter.htm Disallow: /homeup.htm
www.lasercutinc.com
suggerimenti?
grazie...

Rispondi quotando