Defina o estilo tag-order assim
zstyle :completion::complete:-command-:: tag-order local-directories -
A tag local-directories só está disponível quando a opção autocd está ativada. O - diz ao zsh para descartar quaisquer correspondências possíveis em outros tag s
Você também pode encontrar o estilo insert-tab de interesse; então, quando $BUFFER estiver vazio, ele ainda completará os arquivos no diretório atual.
zstyle ':completion:*' insert-tab false