Il problema è che hai veramente poca RAM... Passando da una distribuzione all'altra possono migliorare o peggiore i tempi di caricamento e di risposta del sistema, ma se vuoi usare un desktop grafico come GNOME o KDE la tua RAM è troppo poca, indipendentemente dalla distribuzione che usi.
Dovresti provare, come già ti hanno consigliato, ad utilizzare un desktop managare più leggero, come fluxbox o xfce...