No XP, eu poderia ir em Ferramentas > Opções > Tipos de arquivo e modificar descrições, ícones e ações.
Isso ainda existe no Windows 7?
Não estou encontrando nada explicitamente, mas há muitas recomendações para fazer o download de vários softwares aleatórios para fazer isso.
Deve haver uma maneira de mudar isso sem ter que usar material de terceiros?
Atualização: Encontrou um discussão dizendo que isso foi removido do Vista (e também acho que o W7 também), e só pode ser feito editando o registro.
Então, a menos que alguém saiba se há uma maneira de copiar uma DLL antiga para reativar a funcionalidade, acho que a pergunta é forçada a ser: qual é a melhor ferramenta gratuita?
No Windows 7, a opção para modificar associações de arquivos foi movida para 'Programas padrão', que você pode encontrar no Painel de controle. No entanto, não é tão útil. Uma melhor opção seria
FileTypesMan - Alternativa para o gerenciador de 'Tipos de arquivo' do Windows
É um utilitário abrangente para gerenciar virtualmente todos os aspectos dos tipos de arquivo.
Existe um tutorial parcial aqui:
Tags windows-7 file-types