Não há nenhuma configuração zstyle para isso. O que você pode fazer é tentar a conclusão com um cdpath vazio e, se isso falhar, tente com cdpath .
_cd_try_without_cdpath () {
CDPATH= _cd "$@" || _cd "$@"
}
compdef _cd_try_without_cdpath cd pushd