cd "'dirs +<number>'"
onde <number> é 0 ou 3 ou qualquer outra coisa.
De qualquer forma, recomendo que você verifique um invólucro de cd, como
link , que push es na pilha de dirs em segundo plano e permite fazer cd -- em vez de dirs -v e cd -<number> para entrar no diretório desejado. Ele também substitui os tildas iniciais por $HOME , eliminando o problema que você mencionou nos comentários.