Che io sappia, non si può con un GridLayout. Puoi però ottenere il risultato cercato con GridBagLayout, che è un po' più ostico da configurare, ma con cui puoi creare qualsiasi tipo di Layout

http://java.sun.com/docs/books/tutor...t/gridbag.html