Qual é o driver que você usa? por "Hardware Driver"? Se você usar o "Hardware Drier" para baixar o driver, você pode querer tentar usar o driver de código aberto, dê uma olhada nisso: link
Eu ainda não atualizei para a última versão do ubuntu por causa do fraco suporte para esta placa de vídeo. Qual é o caminho de atualização recomendado para garantir o máximo desempenho 2D?
Você já tentou rodar o 10.10 via live CD para verificar o desempenho?
Eu encontrei este post no OMG Ubuntu sobre como consertar o driver da Nvidia no 10.10 que pode ajudar se o padrão está dando problemas, ele também se vincula a um post no Ubuntu, mas alguns dos comentários sobre o OMG podem ser úteis.