Não é ridículo nem estúpido - talvez um pouco maluco mas mesmo assim ... você pode querer olhar em MPM_peruser ou MPM_itk que parece ter um impacto mínimo no desempenho e é 100% compatível com o mod_php.
O SUEXEC exige que você use o PHP como um CGI e ele terá impacto no desempenho de seus sites (claro que tudo depende de quão ocupados são seus sites ...)
Além disso, como isso é apenas mais uma coisa sobre as medidas de segurança existentes, presumo que você já tenha suhosin, mod_security setup & configurado no lugar.
Para uma grande informação, consulte o ref: link