Просто "Вы не умеете его готовить"!
Нисколько он не корявый, иногда нужно немного изменить то, что идет по дефолту, и всё

По теме:
Не стоит LAMPP ставить, имхо, лучше всё стандартное поднять, тем более, что на убунте поднимается с полпинка!

К примеру так, если мне не изменяет память:
apt-get install apache2 php5 mysql-server + доставить нужные модули пхп...