Non gli arriverà il Bye dal SIP Server.
Fai un trace del SIP con Wireshark e vedi che esce fuori... se la soluzione non è nei toni , starà nella segnalazione.
Anche se non mi spiego poi come mai attacca dopo 90 secondi.