Basta editar seu /etc/fstab
para que ele liste as duas partições de troca e atribua a elas a prioridade relativa:
# /dev/sdbX
UUID=xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx none swap sw,pri=1 0 0
# /dev/sdaX
UUID=yyyyyyyy-yyyy-yyyy-yyyy-yyyyyyyyyyyy none swap sw,pri=2 0 0
Dessa forma, se /dev/sdb
não estiver disponível, somente /dev/sda
será usado e se /dev/sdb
estiver disponível /dev/sdb
será usado e /dev/sda
será usado somente uma vez /dev/sdb
estará cheio.
Você pode verificar o UUID de /dev/sdbX
e /dev/sdaX
com sudo blkid /dev/sdbX
e sudo blkid /dev/sdaX
.