Você pode tentar o Teamviewer . Ele permitirá que você controle seu Ubuntu do seu telefone ou de outro PC. Faça o download do cliente Android no Google Play. Se você gostaria de configurar sua própria conexão, você pode baixar um dos muitos servidores VNC disponíveis para o Ubuntu. Você pode querer ler este para pegar o que melhor atenda às suas necessidades. Existem muitos clientes VNC disponíveis para Android, como o android-vnc-viewer, por exemplo, para que você possa escolher um ao seu gosto.