Não diretamente, já que o tmux simplesmente não manipula os detalhes de conexão com um host remoto. No entanto, você configura uma associação de teclas que cria um novo painel e executa seu comando ssh para se conectar ao host remoto. Quando você se desconecta, o painel é fechado automaticamente.
bind-key h split-window -h 'exec ssh user@host -t tmux -a'
Note que agora você tem uma sessão tmux aparecendo em um painel de sua sessão tmux local; Se você usar o mesmo prefixo em ambos, será necessário certificar-se de que a sessão local tenha send-prefix
configurado (deve ser por padrão, geralmente significa pressionar sua chave de prefixo duas vezes: uma vez para ativar na sessão local, segunda vez para enviá-lo para a sessão remota, após o qual você pode pressionar a tecla de ligação desejada.)