Os clientes de email normalmente têm configurações que você pode configurar para manter anexos no servidor até que sejam solicitados, baixar somente cabeçalhos até que uma mensagem seja lida, etc. Você provavelmente não tem o Outlook configurado para baixar o conteúdo completo da sua caixa de correio logo de cara.