Eu não acho que isso seja um problema. Sua saída corresponde ao que eu vejo no meu Ubuntu 16.04 com GTX 1060. Eu tenho a configuração para usar cuDNN e CUDA com Tensorflow e funciona bem.
Aqui está minha saída para lspci -vnn | grep VGA
:
65:00.0 VGA compatible controller [0300]: NVIDIA Corporation Device [10de:1c03] (rev a1) (prog-if 00 VGA controller])
Depois de ter a configuração CUDA, você pode executar um dos programas de amostra, como deviceQuery:
Isso deve fornecer mais detalhes sobre o modelo específico da GPU, além de confirmar que a CUDA está funcionando corretamente.