per la JLabel
setBorder(BorderFactory.createLineBorder(Color.bla ck, 1));

per il JButton
usa un JToggleButton