Qual versão do sistema operacional?
Nas Preferências do Finder, desmarque a opção "Sempre abrir pastas em uma nova janela" na página Geral
EDIT: Ah, com a barra de ferramentas oculta. Pode estar emulando o comportamento "clássico" do Finder. Bem, se você segurar Option, ele fechará cada janela quando abrir a próxima.