O X forwarding sobre o SSH é dependente do sshd que define o valor de $DISPLAY
apropriadamente, forçando uma substituição no sistema remoto que irá interferir. Se você precisar configurá-lo, indique-o somente se ele já não tiver um valor:
: ${DISPLAY:=:0}