A resposta geral é - NÃO.
O motivo é que, enquanto você PODE colocar seu servidor para receber nessa porta, os outros servidores no mundo enviarão seus e-mails para a porta 25, e você não pode mudar isso.
Isso faz parte das especificações SMTP, e enquanto você está livre para configurar o seu servidor diferente - isso não tem utilidade prática, a menos que o resto do mundo se importe com o seu servidor, o que eles não fazem. Eles apenas tentam enviar para sua porta padrão.