Su Windows 7, ti basta andare in Strumenti, Opzioni cartella, e deselezionare "Mostra sempre le icone, mai le anteprime".