Visualizzazione dei risultati da 1 a 9 su 9

Discussione: Lunghezza robots.txt

  1. #1
    Utente di HTML.it L'avatar di Evi|A|ivE
    Registrato dal
    Jun 2002
    Messaggi
    2,171

    Lunghezza robots.txt

    ma la lunghezza massima è di 2000 caratteri? e oltre che succede? viene bypassato o lo spider abbandona il sito?
    [Disclaimer: le | nel nome non son li per far figo, evito solo di trovarmi spammato il nick nelle millemila pagine del forum in serp ..]

  2. #2
    fonte?

    wikimedia ne usa uno da oltre 4k e direi che funziona

  3. #3
    Utente di HTML.it L'avatar di Evi|A|ivE
    Registrato dal
    Jun 2002
    Messaggi
    2,171
    la fonte è l'errore che mi ritorna google analytics
    beh neanche io avevo mai sentito di limiti di lunghezza... pero la scrittina rossa che mi dice "max 2000 caratteri" mi allarma.. dato che nn so la reazione (bypass totale? se ne frega e legge tutto? non legge nulla? mi manda la polizia a casa?)
    [Disclaimer: le | nel nome non son li per far figo, evito solo di trovarmi spammato il nick nelle millemila pagine del forum in serp ..]

  4. #4
    oddio 2000 caratteri son tanti
    prova a togliere i motori inutili riducendone la dimensione..

  5. #5
    Utente di HTML.it L'avatar di Evi|A|ivE
    Registrato dal
    Jun 2002
    Messaggi
    2,171
    si effettivamente sarebbe piu comoda una funzione del tipo "tutto fuori TRANNE .."

    Anch ese mi chiedo.. nel momento in cui uno spider malevolo (vedi i succhiabanda) legge un robots che lo esclude... si fa scrupoli e lascia stare?
    [Disclaimer: le | nel nome non son li per far figo, evito solo di trovarmi spammato il nick nelle millemila pagine del forum in serp ..]

  6. #6
    qualcuno purtroppo è bastardo e lo ignora
    http://en.wikipedia.org/robots.txt ho dato una lettura veloce e non l'ho ritrovato, forse l'hanno tolto, fino a poco tempo fa c'era "anche se ignora robots.txt, useragent:x; disallow:/"

  7. #7
    Utente di HTML.it L'avatar di Guspy
    Registrato dal
    Jan 2000
    residenza
    Firenze
    Messaggi
    662

    http://en.wikipedia.org/robots.txt

    un robots.txt con pr6 ? .... ma lo hanno linkato? ... e perché?
    Abitua la mente alla tolleranza.
    Guspy - Florence

  8. #8
    Utente di HTML.it L'avatar di fradefra
    Registrato dal
    Jul 2001
    residenza
    Montagnana (PD)
    Messaggi
    1,840

    Re: http://en.wikipedia.org/robots.txt

    [supersaibal]Originariamente inviato da Guspy
    un robots.txt con pr6 ? .... ma lo hanno linkato? ... e perché? [/supersaibal]
    Lo "linkano" tutti quelli che lo citano come esempio.
    Fradèfra Insight - Crescita professionale e personale
    Consulenza e corsi per la crescita imprenditoriale, professionale e personale, a distanza o in presenza.

  9. #9
    Utente di HTML.it L'avatar di Guspy
    Registrato dal
    Jan 2000
    residenza
    Firenze
    Messaggi
    662

    Re: Re: http://en.wikipedia.org/robots.txt

    [supersaibal]Originariamente inviato da fradefra
    Lo "linkano" tutti quelli che lo citano come esempio. [/supersaibal]
    incredibile! ... ammetto la mia ignoraza, non lo sapevo
    Abitua la mente alla tolleranza.
    Guspy - Florence

Permessi di invio

  • Non puoi inserire discussioni
  • Non puoi inserire repliche
  • Non puoi inserire allegati
  • Non puoi modificare i tuoi messaggi
  •  
Powered by vBulletin® Version 4.2.1
Copyright © 2026 vBulletin Solutions, Inc. All rights reserved.