La manera mas sencilla de montar un servidor LAMP (Linux, Apache, MySQL y PHP) en Ubuntu que encontré, es la de utilizar una pequeña aplicación, por linea de comandos, que simplifica enormemente la tarea de instalación y configuración de todos los paquetes necesarios para tener un entorno de desarrollo (no tan mínimo) funcionando. La aplicación es tasksel y para poder instalarla basta con poner en una terminal, Ctrl+Alt+T (Ubuntu):

sudo apt-get install tasksel

Una vez que se termina de instalar ejecutamos:

sudo tasksel

Y eso nos mostrará un listado de servicios, paquetes, escritorios alternativos y muchas otras cosas que vale la pena revisar, pero en este caso el que nos importa es la opción de LAMP Server.

tasksel

Durante el proceso de instalación, podrán configurar la contraseña de MySQL, y otros parametro solicitados por tasksel.

Fácil, rápido e indoloro.