É difícil dizer sem ver o traceroute entre os sistemas. Além disso, é claro, se houver links de discagem envolvidos, também poderá ser razoável.
Dito isto, 566ms é um pouco grande. Eu recebo 510 ms sobre o meu link ADSL sueco para um site chinês típico, então se o seu site é um site bem conectado em um data center no Ocidente, você provavelmente deve esperar menos. Por exemplo, de um data center sueco para um host Amazon E2 da costa leste dos EUA, recebo menos de 100 ms.