Desidero sapere se il file robots.txt così "confezionato" va bene o necessità di qualche altra aggiunta o è meglio togliere qualcosa? E' la prima volta che ne faccio uno!
Grazie mille
Ciao Andrea
P.S. La cartella "images" va bene disabilitata oppure no?
User-agent: *
Disallow: /images/
User-Agent: Googlebot-Image
Disallow: /
User-agent: NetMechanic
Disallow: /
User-agent: EmailCollector
Disallow: /
User-agent: Teleport
Disallow: /
#User-agent: TeleportPro
#Disallow: /
#User-agent: Teleport Pro/1.29.1718
#Disallow: /
#User-agent: Teleport Pro/1.29.1632
#Disallow: /
#User-agent: Teleport Pro/1.29.1590
#Disallow: /
#User-agent: Teleport Pro/1.29
#Disallow: /
User-agent: psbot
Disallow: /

Rispondi quotando
