problema con include

[andgio76]

ciao ragazzi io volevo sapere un informazione
ho un file che includo nelle altre pagine!
in questo file ci sono tutti i link alle altre sezioni, secondo voi devo indicizzarlo oppure bloccarlo nel file robots?

[Mems]

I robots o spider o crawler indicizzano i siti in base ai link che trovano nella pagine partendo dalla pagina principale del sito o da un collegamento ad una pagina interna messo su un altro dominio.
I file inclusi di solito non vengono scovati dagli spider & Co. a meno che tu con del codice client non metta qualche riferimento ad essi.

[Roby_72]

Se il contenuto del file include (i link) appare nelle pagine del sito, quando lo spider entra legge tutto, fregandosene da quale pagina specifica quei link provengano.
L'include è una tua comodità, non c'entra nulla con lo spider.

Roby

[andgio76]

invece mi ha indicizzato gli incluede!
http://www.google.it/search?hl=it&q=...moli.com&meta=
in quei file ci sono i link alle altre sezioni!
cosa faccio le blocco con i robots?

[Roby_72]

A me mai successo...
Non è che hai indicato quei file nella sitemap?

Roby

[andgio76]

probabilmente si! perchè ho uno script, quindi prende tutte le pagine!
secondo voi se dovessi bloccare quelle include nei robots vengo penalizzato?
visto che ci sono i link

[Roby_72]

Ripulisci la sitemap.
Tutto sommato chi dovesse accedere ad un link del genere a te non produce alcun effetto reale e benefico anzi... quindi cerca di far emergere dal motore le pagine realmente utili e significative.

Roby

[andgio76]

ma non posso ripulire la sitemap perchè è uno script!
l'unica cosa che posso fare o lasciare tutto cosi' oppure usare il file robots!
cosa mi dici?

[Roby_72]

Mettere una sitemap tanto per metterla non ha alcun senso...
Prendi il file xml e ripuliscilo a mano.
Ciò non toglie che puoi ANCHE usare il file robots.txt

Roby