Você está totalmente correto.
Se você vir algo como AAAA:BBBB:CCCC:DDD::EEE
, vários números e letras separados por dois pontos, é um endereço IPv6.
Pelo contrário, o IPv4 se parece com 12.34.56.78
, contendo apenas números e separados por pontos.
Atualmente, existem apenas esses dois tipos de endereços IP. Outros formatos de endereço existem, no entanto, é claro, para outros protocolos (IPX, ARP, ...)