O PHP 5.4.10 não está disponível nos repositórios do Ubuntu para 12.04.
Você tem duas opções:
(1) tente e encontre um PPA com uma versão backport do PHP 5.4.10 (como o PPA antigo do ondrej)
a) Execute este comando:
sudo apt-get install python-software-properties
b) Execute este comando:sudo add-apt-repository ppa:ondrej/php5-oldstable
c) Executarsudo apt-get update; sudo apt-get install php5
d) Isso deve permitir que você use o PHP 5.4.10 (ou qualquer que seja o mais recente "Old Stable PHP").
(2) faça o download do PHP a partir do código-fonte e compile-o.
5.4.10 não existe nos repositórios para qualquer versão do Ubuntu, aparentemente, então você está preso a essas duas opções para todas as versões.
(Eu posso tentar backport 5.4.10 do Debian se você quiser, mas seria em um PPA, então você teria que confiar que eu não estou te dando malware, embora eu não fizesse isso nunca.)