praticamente setti un componente tramite setCellRenderer (textarea o label) e poi il testo al suo interno lo potrai formattare anceh tramtie html nel caso delle label.

ciao