Para o Chrome, é armazenado em ~/Library/Application Support/Google/Chrome/Default/Preferences
.
Dentro do arquivo, procure "download"
e, em seguida, "default_directory"
dentro dele.
Para o Firefox: ~/Library/Application Support/Firefox/Profiles/<INSERT_PROFILE_NAME>/prefs.js
Haverá uma linha dizendo:
user_pref("browser.download.dir", "/path/to/download/folder");
Altere o caminho para fazer o que você quiser. Esta linha pode não existir se você nunca editou suas preferências, então talvez seja necessário adicioná-la!