IE prova sempre a metterci almeno un carattere (sa lui cosa): se il carattere e` piu` alto del height, forza l'height ad essere almeno quanto il carattere.

Quindi per fare un blocco molto basso, occorre anche definire:
font-size: 1px;