Como posso configurar o xkb para alternar layouts nos dois sentidos?

Question

Se eu executar setxkbmap -layout us,us -variant altgr-intl,colemak -option grp:alt_space_toggle , posso alternar do layout AltGr-International para o Colemak pressionando Alt + Space. Mas não funciona ao contrário, ou seja, não posso mudar do Colemak para o AltGr-International com o Alt-Space. Eu também tentei executar setxkbmap -layout us,us -variant altgr-intl,colemak -option grp:alt_space_toggle,grp:alt_space_toggle , mas isso também não parece funcionar. Como posso configurar o XKB para que o Alt + Space funcione em ambas as direções?

Estou no NixOS, se isso fizer alguma diferença.