probabilmente rimangono i servizi al boot che fanno pasticci

dovresti provare a disinstallare tutti i driver e tutto quello che riguarda nvidia magari con apt-get --purge remove

e come driver poi usare nv al posto di nvidia momentaneamente

update-rc.d remove nvidia per togliere dai vari run level i servizi installati da nvidia

man update-rc.d per chiarimenti


poi reinstallare i driver corretti per la tua scheda