Ho un sito in asp ed utilizzo alcuni file di inclusione per le pagine. La domanda è: nel file robots.txt è preferibile non permettere di vedere la cartella /include o meno?
Le pagine di questo sito sono create in questo modo:
contenuto della pagina
Ho un sito in asp ed utilizzo alcuni file di inclusione per le pagine. La domanda è: nel file robots.txt è preferibile non permettere di vedere la cartella /include o meno?
Le pagine di questo sito sono create in questo modo:
contenuto della pagina
Se non c'è alcun riferimento alla cartella, non vedo motivo di escluderla.
Per evitare che la pagina venga "registrata" con il solo contenuto centrale, escludendo quindi l'interfaccia_sup e l'l'interfaccia_inf dove sono ci sono header,navigation e footer con collegamento anche al css, e venga poi visualizza da qualcuno non nella sua completezza.