Secondo me è anche troppo se l'unico utente sei te.

Niente x-window-system e vai alla grande.

Debian è ottima, installi il sistema minimale e aggiungi pian piano i servizi che vuoi.

Per la sicurezza.... non so che grado di "intoccabilità" tu voglia, ovvio più servizi ci sono più è rischioso, sinceramente per un uso domestico (da quanto ho capito sarà quello lo scopo del serverino) io non mi preoccuperei più di tanto... cioè magari non mettere il file /etc/passwd nella directory pubblica di apache, però presumo userai comunque applicazioni ben collaudate e testate, quindi dormi sogni tranquilli