Depois de dias pesquisando logs e analisando, descobri o motivo. Eu estou usando um túnel SSH reverso neste servidor. Mas isso não acontece se o túnel estiver aberto. Isso acontece se o túnel for usado ativamente na primeira vez. Como nem sempre estou usando este túnel demorei até encontrar o motivo.