Se você não estiver executando a versão mais recente do WordPress, o proxy reverso não é suportado. Em suma, o WP não sabe como reescrever as URLs que gera dinamicamente.
É bem simples corrigir o WP e corrigir o problema. Este tópico no fórum de suporte do WP contém instruções detalhadas: