Para encontrar o WM_CLASS (que é o nome que você deve colocar no seu bspwm rule ) de qualquer janela, use xprop . Execute
$xprop |awk '/WM_CLASS/{print $4}'
em um terminal, em seguida, clique na janela que você deseja encontrar o nome (neste caso, sua janela de matplotlib) e você irá imprimi-lo no terminal -