Os ícones no Windows são normalmente armazenados em arquivos DLL ou EXE.
Veja Onde encontrar a maioria dos ícones nativos do Windows 10? para alguns exemplos.
Você pode usar o Resource Hacker do Angus Johnson para extrair e salvar os ícones em um arquivo .ico adequado.