Eu estava procurando no lugar errado. O ícone na lista de janelas é retirado do próprio aplicativo. Neste caso, meu aplicativo gtk simplesmente exigiu uma nova propriedade, adicionando ao seu GtkApplicationWindow
:
<property name="icon">/usr/share/icons/my-app.png</property>
E tudo estava bem.