Acho que você precisa reformular sua pergunta com o cabeçalho adequado. O problema conceitual é iniciar algum aplicativo gui usando apenas o sistema x windows sem ambiente de desktop.
Além disso, se você não encontrar uma solução, sugiro usar um gerenciador de janelas minimalista em vez de um ambiente de área de trabalho completo.