De acordo com Especificações do i3 3110 você pode usar até 32 GB. Então você não precisa se preocupar com o seu i3. Eu tinha 8gb com i3 da 2ª geração e não tive problemas.
Qual benefício você obterá depende principalmente das tarefas que você faz e do software que você usa. 4 GB adicionais serão bons se você trabalhar muito com práficas ou processamento de vídeo. Você pode não ver nenhuma diferença se estiver apenas surfando, digitando textos e assistindo a vídeos. De qualquer forma, lembre-se: não existe muita RAM!
Você tem uma placa gráfica integrada que usa sua RAM para que sua RAM real disponível seja menor que 4GB agora. Então, eu recomendaria expandir sua memória de qualquer maneira. Mas tenha certeza que é do mesmo tipo que você já tem. Ou é melhor você comprar um kit de 8GB (2x 4GB) e vender seus atuais 4GB.
Veja a pergunta atualizada: considerando que um único dispositivo virtual no Android Studio pode usar até 2 GB, é altamente recomendável adicionar outros 4 GB.