Acredito que, como você já tem 4 GB de RAM, você perceberá um aumento perceptível no desempenho geral se adicionar mais 4 GB de RAM. No entanto, se você trocar o disco rígido, verá um aumento geral de desempenho sempre que estiver lendo muitos dados da unidade. Exemplos são quando você inicializa seu computador e ao iniciar pacotes de software maiores, como o Photoshop, o Office suit e similares.
Além disso, ao trocar um disco rotativo por um SSD, você obtém um laptop menos barulhento e pode obter melhor desempenho da bateria, já que o laptop não precisa se preocupar em girar para cima e para baixo nos discos das unidades.
Repare que eu não uso software que tenha requisitos extremos de memória. Nesse caso, você obteria melhor desempenho adicionando mais RAM ao sistema.