Dovrebbe funzionare come ti ha detto psykopear, si rallenterà solo al caricamento delle librerie di kde. Le può caricare all'avvio (con un opzione di xfce) in modo da avviare più velocemente i programmi, oppure alla prima volta che ti servono.