É uma questão interessante, uma vez que você está usando apenas para enviar e-mail, portanto não deveria aceitar conexões de entrada ... Então, além de boas práticas de segurança, não é grande coisa (pessoalmente, eu garantiria isso de qualquer maneira) .
Mas, no seu caso particular, é irrelevante, já que você não precisa de um servidor de e-mail sendo executado em seu servidor para apenas enviar e-mails - use seu servidor de e-mail normal .