Per vedere quali estensioni sono presenti consulta il phpinfo().
Se hai installato php da urpmi l'opzione --with-mysql dovrebbe essere abilitata per default, se non ricordo male.
Se vuoi ricompilare php devi scaricare i sorgenti e compilarli a mano dando al configure l'opzione --with-mysql