Da quando ho scoperto il GridBagLayout, io fo tutto con quello

Non adatta il panel ai componenti, ma i componenti al panel, il che non è male ^___^

Altrimenti, mi sa che ti tocca lavorare con la size....

Comunque, ti consiglio di dare un'occhiata anche alla JList e alla JComboBox, per le liste