Esattamente come faresti su Linux, con la differenza che windows si arrabbia se cerchi di dare ad un file un nome che comincia con il punto.

Cmq puoi anche cambiare il nome dell'.htaccess, intervenendo sul file di configurazione di apache