Você pode configurar uma regra na conta do Gmail que recebe esses e-mails para encaminhá-los automaticamente para o seu servidor.
Provavelmente seria mais fácil usar um cliente IMAP e fazer com que seu servidor abra a caixa de correio e verifique periodicamente se há mensagens devolvidas.