Você pode conectá-los, mas talvez não possa usá-los juntos.
Antes de comprar o cabo, leia o manual da TV e procure as instruções sobre o que você deseja fazer.
Se você deseja reproduzir arquivos de vídeo armazenados em seu notebook, precisará instalar algum software para permitir que a TV os leia pela porta USB. Não sei se será possível.
Um pen drive ou disco rígido externo pode ser usado para isso, mas o notebook será mais difícil.
Eu recomendo que você compre um cabo HDMI para conectá-los (se a nota tiver portas HDMI), será muito mais fácil.