Corrigido, ok. Isso é semelhante à ideia de fecub, mas é um arquivo diferente envolvido:
1. delete ~/.config/chromium/Default/favicons
2. restart computer
O segundo passo parece ser importante, simplesmente fechar o Chromium não funcionou. Presumivelmente matá-lo corretamente também funcionaria.