Você precisa definir a opção promote_secondaries
na interface ou em todas as interfaces:
echo 1 > /proc/sys/net/ipv4/conf/eth0/promote_secondaries
ou
sysctl net.ipv4.conf.eth0.promote_secondaries=1
Altere eth0
para all
para que funcione em todas as interfaces.
Esta opção está em desde o 2.6. 12 .
Eu testei isso com uma interface fictícia e funcionou lá.