Parece que você pode ter um serviço em execução localmente que possa estar produzindo esse comportamento. Essa é a única coisa que eu já vi que faria com que uma resposta do localhost excedesse < 1ms.
Faça isso:
- feche todos os navegadores da web, clientes bit torrent, qualquer coisa que possa estar fazendo uma conexão de rede.
- abre um terminal ou prompt de comando (não tenho certeza se você está usando o Windows ou o Linux)
No Windows
netstat -an | findstr 127.0.0.1
no Linux
netstat -an | grep 127.0.0.1
Veja as conexões ESTABLISHED ou LISTENING .
Alguns serviços comuns para procurar seriam HTTP (80), Socks Proxy (8080, 8000, etc), SQL Server (1433), Webmin (10000), MySQL (3306).