Mah, ho fatto una prova su una macchina virtuale e addirittura sembra andare lubuntu con 128 MB di RAM (navigare è una pena, ma vabbé...), secondo me con Debian ce la potrebbe fare... in ogni caso sarebbe al pelo (lubuntu swappa di brutto), e la soluzione più leggera è sicuramente usare direttamente OpenBox come dici.