Eu encontrei este tópico , que afirma que (parte de) a solução é:
sudo aptitude remove --purge dunst
Edit: Funciona! Depois de uma reinicialização (login e logout podem fazer quatro vezes), agora tenho as notificações "antigas" no canto superior direito de volta.