Ciao a tutti e buon anno
Tanto per cominciare sempre che la sezione sia corratta(nel caso un moderatore potrebbe spostare gentilmente il post), non essendo molto esperto in regole SEO avrei bisogno di avere delucidazioni sull'utilizzo di un file robots.tx
Attualmente a me interessa che sia visibile la sitemap.xml che sta nella doc_root insieme all' index.html e delle cartelle, tutti gli altri file o cartelle andrebbero ignorate.
Evidentemente qualcosa non va in quanto (a meno che non sia molto affidabile) da webmaster tool vedo errori di lettura/accesso ai file.

Questo il mio file
codice:
User-agent: *
Sitemap: http://...../sitemap.xml
Allow: index.html
Allow: /metahomepages/....../yyyy.php
Allow: /metahomepages/....../xxxx.php
Allow: sitemap.xml
Disallow: /
A quanto pare non piace.
Ho provato ad eliminare anche Disallow: / ma poi mi prende tutto.

Ringrazio in anticipo per eventuali risposte.