Para exibir alertas sobre novos emails que chegam em outras pastas além da Caixa de Entrada padrão, a solução seria usar Regras. Veja este link para um guia passo-a-passo detalhado para fazer isso. O mais importante é o passo 9 para garantir que isso seja executado antes de todas as outras regras. Este bolg post tem uma versão resumida do mesmo com screenshots, se é mais fácil de seguir.
Além disso, um artigo da ajuda on-line do Microsoft Office em mesmo tópico para mais informações.