Ho una piccola esperienza riconducibile al tuo discorso ...
Forse ho frainteso gli avvenimenti, ma da quando ho tolto il file robots, ho notato un peggiornamento nel posizionamento e nel PR (non passano nelle varie pagine lincate alla index?).

Altra cosa, un sito senza robots non riesco a farlo decollare ...