Robot.txt, eliminare la cartella principale

[costadilevante]

Ho creato un sito dinamico in due lingue. Le pagine in lingua italiana si trovano in www.ebooksopen.org/it/ mentre quelle in lingua inglese in www.ebooksopen.org/en/.
La pagina www.booksopen.org/index.php non fa altro che leggere la lingua del browser e reindirizzarti alla versione italiana o inglese del sito.
Fin qui tutto bene, ma a google la cosa non piace, e me la segnala come contenuto duplicato. Anzi triplicato:
www.ebooksopen.org
www.ebooksopen.org/index.php
www.ebooksopen.org/it/
Ho quindi provveduto a bloccare i bot con questa istruzione:

Disallow: /index.php

ed ho risolto con problema con www.ebooksopne.org/index.php,
ma come blocco www.ebooksopen.org ?
Se faccio

Disallow: /

disabilito tutto il sito temo!
Domanda a tema: è possibile bloccare una cartella, ma non le sue sottocartelle?

[rigby76]

In che modo lo fai il redirect? Con un redirect 301 lato server non dovresti avere problemi di duplicazione. In ogni caso, non mi sembra una buona idea usare il robots.txt per queste cose, piuttosto usa il canonical url per canonizzare le tre url su una a tua scelta.

[costadilevante]

In realtà lo faccio con un semplice header('location:---') da php.
Avevo anch'io l'impressione di aver preso una strada tortuosa. Ho visto che online ci sono diverse guide sui canonical url, più tardi ci do un'occhiata e ti faccio sapere