O RDS não é de escalonamento automático de nenhuma forma. É uma instância gerenciada do MySQL. Para escalar o RDS, você precisa pular os tamanhos das instâncias ou adicionar escravos de leitura, sendo que ambos são possíveis, mas ambos exigiriam intervenção manual e provavelmente um pouco de tempo de inatividade.
Dito isso, o RDS faz oferecer benefícios se você não se importa em ser um DBA - eles podem lidar com backups, atualizações de versão do MySQL, etc. servidor web, do que faria sentido usar o RDS agora, se não no futuro.
Você realmente só precisa examinar as habilidades de sysadmin e dba disponíveis e o tempo que está disposto a dedicar à manutenção e, em seguida, decidir se o custo extra do RDS vale a pena para o seu negócio.