jframe.setLayoutManager(new GridLayout(1,2));

hai 2 colonne ed una riga...ovvero quello che serve a te. quando andrai ad aggiungere un nuovo componente lo inseriraà in posizione 1-1, poi in 1-2...se cerchi in rete "guida swing pgi-bis" troverai una guida esauriente