O Backports instala os drivers de rede de um kernel mais novo, 3.16, por exemplo, em um kernel anterior, no seu caso 3.13. Como você pode selecionar quais drivers instalar e não instalar todos os drivers sem fio que você não precisa, defconfig ath10k, se você tiver dois dispositivos, você corre o risco de instalar peças conflitantes cfg80211 e mac80211, como você encontrou!
Você também pode tentar instalar o driver do seu dispositivo existente no mesmo pacote de backports e ver se isso ajuda.
Além disso, o Network Manager geralmente permitirá uma conexão ou outra, não ambas.