Você verificou que os drivers que você instalou para este dispositivo são da versão mais recente e são drivers oficiais do fabricante, se não, sugiro remover os drivers antigos e instalar os mais novos. Se isso não resolver o problema, da próxima vez que o som ficar lento, verifique se o uso de sua CPU / memória não está excepcionalmente alto e, em caso afirmativo, isso muda quando você desconecta os fones de ouvido?