file robots.txt ...

[maopapi]

ho letto in diversi siti in italiano .... ma ho visto che non esiste una tabella che dica il significato esatto di ogni parola ... ho cercato anche fra la mia concorrenza e sono pochi che hanno questo tipo di file .... i più hanno scritto solo

# robots.txt
User-agent: *
Disallow:

e solo uno a scritto questo che non ho capito

User-agent: EmailCollector
Disallow: /
User-agent: *
Crawl-delay: 5
Disallow: /__we_thumbs__
Disallow: /admin
Disallow: /adminhd
Disallow: /b2b
Disallow: /b2b_tabellen
Disallow: /cfg
Disallow: /ch/module
Disallow: /config
Disallow: /de/module
Disallow: /en/module
Disallow: /flash
Disallow: /kw_upload
Disallow: /kw_uploadOLD
Disallow: /Library
Disallow: /module
Disallow: /motorsport
Disallow: /News
Disallow: /nushop
Disallow: /pdf
Disallow: /php-bin
Disallow: /php-functions
Disallow: /php-includes
Disallow: /scripts
Disallow: /shop
Disallow: /kw_upload
Disallow: /Templates
Disallow: /uk/module
Disallow: /wasser
Disallow: /webEdition
Disallow: /ww1
Disallow: /admin/phpSitemapNG
Disallow: /SITE_MANAGER
Disallow: /Statistiche

qualcuno dal cuore gentile e dal proposito di poi andare in paradiso .... mi aiuterebbe a tradurlo ? ....... grazie anticipato

[webdemo]

se intendo riferirmi a tutti i robots, scrivo:

User-agent: *

se intendo escludere solo un file al/ai robots, scrivo:

Disallow: /testi.html

se intendo escludere una intera cartella, scrivo:

Disallow: /cartella

[maopapi]

per prima cosa ringrazio da neofita vagante

solo un'ultima cosa ...

1 ) allora i riferimenti file = pagina
cartella = un settore del sito oppure un argomento di più pagine

2) # robots.txt = ?


3 ) quindi queste sono pagine Disallow: /motorsport
Disallow: /News < --- pagina che contenga news ?
Disallow: /nushop
Disallow: /pdf <--- pagina che contenga pdf ?

4 ) non sò se c'entra .... ma se ho una pagina con link che portano a siti concorrenti , ed a questi ultimi non voglio che sia un link che gli crei maggiore pubblicità , come devo fare ? avevo letto qualcosa ma .... non ricordo più ... grazie anticipato

[ricman]

Naturalmente, come al solito, bastava guardare qui per togliersi ogni dubbio.

Originariamente inviato da maopapi

3 ) quindi queste sono pagine Disallow: /motorsport
Disallow: /News < --- pagina che contenga news ?
Disallow: /nushop
Disallow: /pdf <--- pagina che contenga pdf ?

Sono DIRECTORY, non pagine. E il nome che dai a una directory non implica per forza che dentro cidebba essere qualcosa in coerenza. Cmq si suppone che per logica dentro a News ci stiano i vari file php (o asp) che fanno girare il programma delle news...

Originariamente inviato da maopapi
4 ) non sò se c'entra .... ma se ho una pagina con link che portano a siti concorrenti , ed a questi ultimi non voglio che sia un link che gli crei maggiore pubblicità , come devo fare ?

Mi sa che non c'entra... o forse non ho capito io... Se stiamo ancora parlando del file robot.txt puoi mettere quella pagina in "disallow" (per quanto possa valere il robot.txt!!)
Se invece volevi sapere altre cose non ho capito...

[webdemo]

Originariamente inviato da maopapi
2) # robots.txt = ?

4 ) non sò se c'entra .... ma se ho una pagina con link che portano a siti concorrenti , ed a questi ultimi non voglio che sia un link che gli crei maggiore pubblicità , come devo fare ? avevo letto qualcosa ma .... non ricordo più ... grazie anticipato

2) il cancelletto commenta l'intera riga

4)
Disallow: /pagina_che_non_voglio_far_seguire_ai_robots.htm
Disallow: /cartella_che_non_voglio_far_seguire_ai_robots

in alternativa puoi utilizzare:

Link

[maopapi]

ringrazio come sempre per le risposte ... cercherò di mettere in pratica :O)