A partir de agora, o RDS permite alterar configurações. Então você pode
- Veja a lista de configurações que o seu RDS está usando.
- Você pode alterar esses parâmetros. Eu acredito que você não pode mudar tudo os parâmetros embora. Você pode alterar aqueles que estão listados no Página de referência do RDS.
Como de costume, há alguns parâmetros de configuração estáticos (ou fixos) para os quais você precisa reiniciar seu servidor de banco de dados e, em seguida, há opções dinâmicas para as quais você não precisa reiniciar.
Veja o que o manual de referência do RDS diz:
PostgreSQL parameters that you would set for a local PostgreSQL instance in the postgresql.conf file are maintained in the DB parameter group for your DB instance. If you create a DB instance using the default parameter group, the parameter settings are in the parameter group called default.postgres9.3.
When you create a DB instance, the parameters in the associated DB parameter group are loaded. You can modify parameter values by changing values in the parameter group. You can also change parameter values, if you have the security privileges to do so, by using the ALTER DATABASE, ALTER ROLE, and the SET commands. Note that you cannot use the command line postgres command nor the env PGOPTIONS command because you will have no access to the host.
Aqui está a documentação oficial do Amazon RDS para postgres: link