A menos que você faça uma recompilação completa de fontes na plataforma 13.04, eu recomendaria NÃO instalar qualquer versão pré-empacotada de uma versão mais antiga do PHP em um sistema operacional posterior. A razão é que existem muitas incompatibilidades entre os principais lançamentos e você ficará surpreendido quando as coisas não funcionarem.
Em qualquer caso, será um incômodo tomar tempo e esforço. Você provavelmente será obrigado a recompilar e reinstalar vários pacotes dependentes para que isso funcione. Isso pode exigir muito esforço para manter a versão antiga à medida que pacotes de suporte mais recentes são lançados e atualizados pelo fornecedor (ou seja, mais recompilações e reinstalações).
Além disso, lembre-se de que existem problemas corrigidos na versão mais recente do PHP (problemas de segurança) que não valem a pena voltar atrás para uma versão mais antiga.
Uma outra sugestão pode ser a reinstalação de um SO que suporte a versão do PHP desejada como parte da distribuição.