Página man do Tmux, na seção FORMATS diz:
The
b:
andd:
prefixes are basename(3) and dirname(3) of the variable respectively.
A seguinte opção deve efetivamente mudar o título da janela para o nome base do diretório atual:
setw -g automatic-rename-format "#{b:pane_current_path}"