Se você atualizar o sistema para o 16.04, uma nova versão do Xorg será instalada.
Não é possível usar a versão antiga do Xorg, porque isso quebrará as dependências.
Você pode continuar usando o Ubuntu 14.04 se tiver problemas com os novos lançamentos.