Não acho que haja uma resposta simples para isso, mas há várias alterações de configuração que você pode tentar:
- Desativando as opções de TCP
- Ativar armazenamento em cache de estatísticas - server.stat-cache-engine
- Recompile para desabilitar o suporte para arquivos grandes
- Veja se sua caixa suporta o manipulador de rede sendfile (), que entrega arquivos mais rapidamente, enviando-os diretamente para a placa de rede
Eu escolhi estes como o mais provável (IMHO) para aumentar o tempo de resposta do guia de sintonização do lighttpd: [ link