Não, você terá que baixar um driver de gráficos separadamente para o Ubuntu. Por padrão, o driver gráfico de código aberto vem instalado no kernel.
Se você está tendo problemas com o driver padrão ou precisa de um proprietário, obtenha a partir das Configurações do sistema > Janela de Drivers Adicionais (para 12.04 e mais antigos) ou Fontes de Software > Drivers adicionais (12.10 e mais recentes).
Esses links podem ajudar você
Para ATI: link
E a Nvidia: link