Tente adicionar à sua configuração de pré-configuração (supondo que você esteja fazendo uma pré-configuração, como "instalar autônoma"):
rabbitmq-server rabbitmq-server/upgrade_previous note
Se não estiver fazendo instalação autônoma, pode passar essas opções para debconf-set-selections (como root):
echo "rabbitmq-server rabbitmq-server/upgrade_previous note" | debconf-set-selections