Sim, uma conexão com proxy conta com o limite de conexão. No entanto, certamente não vai consumir tanto recursos em termos de conexão quanto de servir a qualquer coisa; você poderia considerar o proxy das requisições pesadas do PHP, aumentando a configuração MaxClients
do Apache (e outras configurações associadas do MPM, se necessário).