Prima cosa farei un controllo della RAM.
Se tutto ok proverei con una Distro NON basata su Debian per vedere se cambia qualcosa, magari c'è qualcosa sotto che da fastidio