Mysql è partito?
Cmq io ho istallato da aptget: apache2, libapache2-mod-php4, e mysql-server
E tutto funzia bene.. c'è untutorial anche sul sito di ubuntu, un HOWTO che spiega cosa installare per un webserver.