Chiarimenti robots.txt

[sonik_the_sonik]

Salve,

Come scrivere un robots.txt
1. per tutti i motori di ricerca
2. che consenta l'indicizzazione di una cartella chiamata users
3. che neghi l'indicizzazione a tutte le altre cartelle presenti nel sito.

La struttura delle pagine è del tipo:

nomesito.it
   users  <--- CONSENTIRE 
   admin <--- NEGARE DA QUI IN POI 
   img
      sfondi
      ...
      fotogallery
   cartella1
   ...
   cartellaN

Mi sembra che quello che ho scritto io:

User-agent: *
Disallow: /admin
Disallow: admin

non funga.
Il sito anche se in costruzione è on-line da quasi un mese e non è ancora indicizzato da google, anche se gli ho segnalato il sito con il suo servizio apposito.

Il dubbio è su come usare lo slash (per quello è scritto doppio a quel modo!!!) e se devo consentire o meno l'indicizzazione alle cartelle che mi interessano.

Grazie a tutti quelli che mi vorranno aiutare! Esempi e link sono graditi, anche se preferirei una soluzione ad-hoc !


PS. Se ritenete che abbia sbagliato sezione spostate pure!!!

[Federix]

Prima che il robots.txt venga scansionato ci vuole un pò di tempo perché la modifica non è immediata, ma i motori di ricerca hanno bisogno di tempo che solitamente varia da 1 a 6 mesi, come avviene per la scansione dell'intero sito.

Io per disattivare tutto il contenuto di una cartella, metto così:

User-agent: *
Disallow: /admin/*

e sembra funzionare.

[sonik_the_sonik]

Grazie per la risposta.
Dunque per consentire l'indicizzazione non serve scriverlo esplicitamente? Se voglio che sia indicizzato tutto a parte qualche cartella, basta negare solo quello che mi interessa? Ho capito bene?

[webdemo]

Originariamente inviato da sonik_the_sonik
Dunque per consentire l'indicizzazione non serve scriverlo esplicitamente?

No non serve.

Se voglio che sia indicizzato tutto a parte qualche cartella, basta negare solo quello che mi interessa? Ho capito bene?

Si.

Fai così:


# tutti i robots:
User-agent: *

# esclude solo un file:
Disallow: /nomefile.html

# esclude solo questa cartella:
Disallow: /cartella

ciaux

[sonik_the_sonik]

Grazie mille!

Penso che provvederò anche a fare una mappa del sito! Possibile non essere trovato da google nemmeno digitando l'indirizzo completo del sito nella barra delle ricerche!!

[webdemo]

non credo dipenda dal fatto che non hai una mappa del sito...

se vuoi approfondire ti sposto nel forum giusto

ciaux

[sonik_the_sonik]

Per ora non importa, quando ho finito se ne riparlerà sicuramente... grazie ancora!