Eu tive o mesmo problema e consegui resolvê-lo assim:
1) deixe o mutt imprimir sua senha (está funcionando você deve ver sua senha em texto claro)
:set imap_pass
2) Eu vi um $ principal, então eu mudei o conjunto imap_pass
set imap_pass=$my_pass
3) Eu tenho caracteres especiais na minha senha, então eu tive que citar o resultado
set my_pass="'pass ...'"
Tenha também muito cuidado ao usar as aspas corretas, pois elas têm um significado diferente: link