Esiste un attributo chiamato DefaultButton legato agli oggetti asp:Panel

Prova ad utilizzare quello. Le coppie imageButton e textBox andranno in due panel separati.
Il valore di DefaultButton dovrà essere l'Id di ImageButton