Você pode usar a diretiva inet_interfaces
em /etc/postfix/main.cf
para controlar o endereço que o Postfix atende para conexões de entrada. Se você configurá-lo para o seguinte, ele apenas escutará na interface de loopback, o que significa que as conexões só podem se originar daquela máquina.
inet_interfaces = loopback-only