A alteração das configurações da MTU parece ter resolvido o problema. Minha conexão doméstica usa PPPoE com MTU configurado para 1460. Reduzi as configurações de MTU do servidor para 1460 e as coisas melhoraram. Ainda houve um atraso perceptível, reduziu o MTU até 1432 e voila!