apt-get remove gdm

oppure togli il servizio gdm con il comando update.rc.d


update-rc.d gdm remove