A solução é modificar ~/.tmux.conf
para:
# Start windows and panes at 1, not 0
set -g base-index 1
setw -g pane-base-index 1
Edit: ao contrário de base-index, pane-base-index é uma opção de janela, então setw deve ser usado, como @Jogusa apontou.