O ícone do envelope amarelo será exibido para mensagens não lidas que são entregues na Caixa de Entrada padrão para cada conta configurada no seu perfil do Outlook. Não é necessário marcar todos os emails não lidos como lidos para ocultar o ícone. Uma reinicialização do Outlook deve corrigir isso.