Se scrivi per esempio "check robots.txt" sul motore di ricerca trovi questo:
http://tool.motoricerca.info/robots-checker.phtml
E anche questo, se vuoi analizzare il codice prima di caricarlo:
https://webmaster.yandex.com/robots.xml
Comunque per sapere se Google accetta o no una direttiva, bisognerebbe iscriversi a "strumenti per webmaster" di Google e quindi sottoporre il proprio file robots all'apposito strumento di analisi.