C'è un motivo particolare per cui usi i sorgenti e non gli rpm?

Fossi in te userei gli rpm...molto più facili da installare e si aggiornano con un clic

Gli esempi di indirizzi che hai indicato te però semprerebbero programmi compilati a mano e non installati... il quel caso, basta cancellare la cartella, di norma.
Io darei prima un make uninstall