Obrigado @Jiri Xichtkniha e @Anthon
Ao digitar
sudo lsof -nPi | grep \:53
Eu posso ver que o bind também está escutando na mesma porta:
TCP *:53 (LISTEN)
Eu fiz então uma modificação no /etc/unbound/unbound.conf adicionando esta linha:
port:533
ps: O número da porta, o padrão 53, no qual o servidor responde às consultas.
Outra solução é mudar a porta do Bind de 53 para outra.
Espero que ajude outras pessoas com o mesmo problema.