Eu não acho que 2,6 segundos é terrivelmente lento para o seu site médio que não foi criado por uma equipe de engenheiros em tempo integral (veja: google.com).
Seu problema é provavelmente em E / S, rede ou disco ou memória ou etc.
Você terá que rastrear a pilha de aplicativos. Isso envolvia investigar seu software de servidor da Web (apache httpd, ngnix, etc), a pilha do php, o código php e quaisquer mecanismos de armazenamento de backend, como sistemas de arquivos e MySQL que suportam a pilha.
O atraso pode ser causado por um disco lento, uma consulta mysql não indexada, um gargalo na rede ou até mesmo um loop ou função otimizada no código. Eu não acho que poderemos ajudá-lo muito a menos que você possa fornecer detalhes sobre o seu ambiente e fazer perguntas específicas.