Consegui resolver isso usando uma chamada wmctrl
no final do meu arquivo .zshrc
wmctrl -i -a $(wmctrl -l | grep Terminal | tail -n 1 | cut -d ' ' -f1)
Isso força o foco para as últimas janelas abertas com o nome terminal
(Eu acho que o terminal grep poderia ser removido)