Você pode alterar manualmente o ícone de um tipo de arquivo por meio do registro , mas é mais fácil e seguro fazê-lo com um programa como o FileTypesManager :

Nemtodososprogramasfornecemumíconededocumento,masvocêpodeusarqualquerarquivo.ico,.dll,.exeoubibliotecadeícones(.icl),paraquevocênãotenhaqueselimitarapenasaoprogramaarquivos.
ParaoChrome,vocêpodetentarusarologotipodouradoabaixo.Vocêtambémpode.ico .)
