Um arranjo de 64 bits não consumirá o dobro de memória para a (s) mesma (s) tarefa (s). Algum código será duas vezes maior (tanto na RAM quanto no disco), e algumas estruturas de dados também serão maiores devido a ponteiros maiores e por razões de eficiência (ou seja, estruturas preenchido para alinhar com limites de 64 bits em vez de limites de 32 bits), mas a maioria dos dados em massa, como os mantidos na RAM por um banco de dados, não terá uma área ocupada maior.
O uso de uma compilação de 64 bits pode fornecer um pouco mais de desempenho para tarefas com uso intensivo de memória / CPU, pois o código poderá usar os registros adicionais (e maiores) disponíveis na CPU, em vez de se limitar aos menos aqueles disponíveis no modo de 32 bits, e podem ser mais eficientes do ponto de vista do hipervisor, pois não precisarão de muitos switches de contexto que envolvem entrar e sair do modo longo (64 bits).
Meu instinto sugere ir para a opção de 64 bits, a menos que você esteja contando com um pacote de 32 bits que não tenha versão ou código de 64 bits para que você possa compilar o seu próprio.
Eu sugeriria tentar os dois se você tiver tempo: instale algo como o VirtualBox em uma máquina doméstica se tiver um que seja compatível com 64 bits e crie duas VMs de 512Mb (uma com uma instalação de 32 bits e outra com uma totalmente de 64 bits) com a combinação de software que você planeja usar. Isso lhe dará uma indicação melhor de qualquer diferença que você notará do que as regras do polegar e o trabalho de adivinhação.
Como uma nota lateral: 4Gb é um lote de swap para uma máquina de 512Mb, virtual ou não. Se você tiver paginado tanto para o disco quanto na RAM, provavelmente verá uma queda de desempenho significativa devido à troca de trocas (páginas que estão sendo constantemente trocadas entre RAM e disco), se você entrar em uma situação em que você tenha 8 vezes quantas páginas de memória no disco você tiver na RAM, espero que a VM tenha sido interrompida há muito tempo. Algum desse espaço seria muito melhor usado como armazenamento de arquivos se você tiver a opção.