É um equívoco entre MTAs como postfix, sendmail, exim vs servidores de e-mail, onde um cliente acessa e-mails armazenados pelo acima sobre protocolos comuns de clientes como imap ou Pop3.
Você, como os outros, apenas expõe o e-mail armazenado localmente por um MTA aos clientes para download ou sincronização; em resumo, você precisa de ambos.
Outra coisa a considerar é o zimbra e o open365, que são plataformas de email, que também usam postfix under the hood para enfileiramento e entrega com sistemas de email de terceiros.