Você não especificou qual região está usando. Talvez eles não estejam disponíveis em TODAS as regiões, mas você sempre pode copiar uma AMI para sua região. Aqui estão os IDs da AMI para duas regiões. Ambos podem ser encontrados na tela AWS Console Choose AMI.
Para a região dos EUA-Oeste-2 (Oregon):
Microsoft Windows Server 1709 com contêineres - ami-09e1069e8977beaaf
Microsoft Windows Server 1803 com contêineres - ami-08d548200f7232435
EUA-Leste-1
Microsoft Windows Server 1709 com contêineres - ami-04aa9dd58d1277860
Microsoft Windows Server 1803 com contêineres - ami-0a730289c7c16e141