Tente e veja se suas interfaces vlan ainda são removíveis via vconfig:
vconfig rem yourInterfaces.name
Além disso, às vezes, quando "ifdown" fornece esse erro usando ifconfig ainda funciona:
ifconfig yourInterfaces.name down
Uma opção para tentar:
ip link delete interface.name