Stai parlando dei "tooltips"?
Swing supporta nativamente i tooltips per tutti i componenti:


codice:
JLabel lbl = new JLabel("Sposta il mouse qui sopra");
lbl.setToolTipText("Questo è il tooltip del componente");

Aggiungo la JLabel ad un contenitore, avvia l'applicazione e passa col mouse sopra alla scritta.


Ciao.