non sono pratico di servlet, ma credo che sia come la sdk, basta che specifichi il tipo MIME del testo, dovrebbe essere un metodo tipo setContentType(mime), a mime passi "text/html".
Fatto questo scrivi normalmente html nel messaggio.