Se o envio de e-mails em massa for o único motivo para você mudar para o seu próprio servidor, é melhor "terceirizar" sua entrega de e-mail para um provedor especializado.
As especificações de desempenho do VPS que você mencionou devem ser adequadas para um site moderadamente visitado *.
*: palpite puramente iletrado, já que você não escreveu quantos visitantes tem, qual tecnologia seu aplicativo está usando, etc.