Cosa intendi per chiudere?
Se intendi terminare il programma usa JFrame.EXIT_ON_CLOSE
Altrimenti dovrebbero chiudersi come comportamento di default.