Volevo sapere se google valuta il disallow nel file robots.txt come il nofollow del link in html.
![]()
Volevo sapere se google valuta il disallow nel file robots.txt come il nofollow del link in html.
![]()
e´un file robots.txt non visitato
mmmmmmmmmmmmmmappinnnn...
no, la differenza è:
- il disallow nel robots.txt impedisce sempre allo spider di scansionare la pagina
- un nofollow sul link che punta a una pagina indica allo spider di non seguire quel link, ma la pagina la può comunque scansionare e indicizzare
Quindi la differenza sta nel fatto che il disallow è più potente?
(la pagina a cui fa riferimento il link del nofollow viene o no scansionata?)
Grazie
Non è "più potente", è solo uno strumento diverso.Originariamente inviato da mondiali_2010
Quindi la differenza sta nel fatto che il disallow è più potente?
E' più potente un martello, un cacciavite o una pinza? Dipende da cosa devi fare...
A seconda di cosa vuoi ottenere, prendi in considerazione anche l'istruzione "noindex", che puoi aggiungere sia nel meta tag robots della pagina, sia nel file robots.txt (per quanto riguarda Googlebot).
Per info al riguardo, fai qualche ricerca.
Se lo spider riceve segnali che lo inducono a scansionarla, può farlo finché non glielo vieti nel robots.txt.Originariamente inviato da mondiali_2010
(la pagina a cui fa riferimento il link del nofollow viene o no scansionata?)
Con la presenza del solo link nofollow, qualche scansione sporadica potrebbe farla. L'indicizzazione invece è già più difficile.
PregoOriginariamente inviato da mondiali_2010
Grazie![]()
Quindi sono quasi equivalenti nel risultato, nel senso che con il disallow non la scansiona mentre con il nofollow potrebbe?
E poi quando è che con il nofollow "potrebbe" scansionarla?
E a che pro?
Esatto.Originariamente inviato da mondiali_2010
con il disallow non la scansiona mentre con il nofollow potrebbe?
Con il noindex invece, non la indicizza proprio (mentre col disallow potrebbe indicizzarla anche senza scansionarla, come succede abbastanza spesso).
A che pro un motore di ricerca scansiona il web?Originariamente inviato da mondiali_2010
E poi quando è che con il nofollow "potrebbe" scansionarla?
E a che pro?![]()
Considera anche che il fatto che tu metta un nofollow sul tuo link alla tua pagina, non esclude che potrebbero esserci altri link follow verso quella pagina.
E come fa, se non scansiona la pagina?Originariamente inviato da Petro_suse91
col disallow potrebbe indicizzarla anche senza scansionarla, come succede abbastanza spesso
Ah beh certo, se facciamo riferimento da altri link.Considera anche che il fatto che tu metta un nofollow sul tuo link alla tua pagina, non esclude che potrebbero esserci altri link follow verso quella pagina.
Grazie per le puntualizzazioni.
![]()
Ottima domandaOriginariamente inviato da mondiali_2010
E come fa, se non scansiona la pagina?
Si basa sulle informazioni che ha, quindi:
- URL
- Link verso quell'URL
- Anchor text dei link verso quell'URL (può usarlo come titolo del link visualizzato)
Di solito un URL in disallow appare in SERP solo con URL e titolo, senza snippet. Questo perché chiaramente non può conoscere cosa c'è nella pagina.
Vedi ad esempio:
http://googleads.g.doubleclick.net/robots.txt
http://www.google.it/#q=site:http://...57bd50e7861b45
P.S.: curiosa la direttiva Noindex sul robots!