disinstallalo con il apt-get --purge remove
oppure rimuovi i riferimenti in /boot/grub /menu.lst e i moduli in /lib/modules e i files in /boot rimasti di quel kernel