Completo la discussione per chi ne avesse bisogno in futuro.

Si può ottenere una semplice Window (senza nessun componente aggiuntivo) anche usando un JDialog, così:

codice:
 
JDialog dialog = new JDialog();
dialog.setUndecorated(true);