la pseudoclasse css :hover e' disponibile per qualsiasi elemento su tutti i browser moderni,
con l' eccezione di IE6 e IE7 (per quest ultimo se il documento non ha strict doctype) dove quindi l' hover e' applicabile solo su <a>

questo vuol dire che con un doctype strict puoi scrivere nel css la regola
.classeCella:hover {background-color:#f00;}
e funzionera' ovunque tranne in IE6

per risolvere puoi,
- o usare una delle librerie/framework, per esempio qui una soluzione per prototype, ma ne troverai gia' pronte per le piu' diffuse librerie
- o una piccola libreria apposita chiamata IE7
che fa comportare IE6 come IE7 (con buona approssimazione)
- o questo behavior, che copre solo l' :hover in IE6

ultima ipotesi, fartelo da solo, se hai tempo/voglia e conoscenze adeguate

ciao