Se "não parecem se reconhecer", você não pode enviar e receber pings ICMP porque o ICMP está desabilitado em VMs do Azure.
Tente abrir um soquete TCP na porta desejada executando o serviço para o qual você deseja verificar a conectividade:
PS C:\Windows\system32> New-Object Net.Sockets.TcpClient "192.168.10.10", 8043
Client : System.Net.Sockets.Socket
Available : 0
Connected : True
ExclusiveAddressUse : False
ReceiveBufferSize : 65536
SendBufferSize : 65536
ReceiveTimeout : 0
SendTimeout : 0
LingerState : System.Net.Sockets.LingerOption
NoDelay : False