Ti consiglio di usare gli ActionListener non gli Adapter per queste cose.
A me non hanno mai dato questo tipo di problemi.