Você provavelmente está usando o Skype para falar com eles. Certifique-se de desativar seu som no TeamViewer. Nas configurações do seu computador, desabilite o som do teamwiever.
Se você estiver usando o TeamViewer para conversar com outra pessoa, não poderá ouvi-la.