Esta não é realmente uma solução adequada, mas funcionou para mim, espero que alguém encontre uma maneira melhor de fazer isso.
Instalei o Windows 7 e instalei os drivers da nvidia com a placa conectada ao Mobo, mudei o vídeo para a placa e tudo funcionou bem. Inicializou em um live cd do Xubuntu e instalou tudo, menos o Windows 7 Loader (possivelmente você pode se livrar disso também). Cartão agora funciona bem no Xubuntu