Minha melhor e única resposta até agora é: desista do Amazon Linux 2.
Após tentar e falhar na configuração de um proxy reverso Nginx na esperança de definir os cabeçalhos e contornar o problema (o Amazon Linux 2 parece não ter os utilitários make
necessários para construir mod_rpaf
- isso foi Na última gota), criei uma nova instância usando o Ubuntu e iniciei um longo processo de configuração de tudo o que tinha configurado no Amazon Linux 2, mas era relativamente mais fácil e menos confuso no Ubuntu e havia muito mais tutoriais úteis para trabalhar em geral.
No final, acabei sendo capaz de adicionar Nginx na pilha como um bônus, tendo um proxy reverso para o Apache, e agora não há nenhum cabeçalho de configuração de problema no Apache.
Para outras pessoas com esse problema, ou considerando o uso da AWS para executar um servidor da Web Apache, meu conselho dessa experiência é: não use o Amazon Linux 2!
Não apenas a configuração de cabeçalhos do Apache simplesmente não parece funcionar (o que é fundamental para ativar alguns recursos de segurança modernos que não dependem do PHP funcionando o tempo todo), mas em geral tudo é muito mais fácil e flexível usando um Construção do Ubuntu. Não há bons documentos da AWS para a compilação do Ubuntu, mas o resto da Internet tem cobertura e você pode aplicar as partes específicas da AWS (grupos de segurança, IP elástico e rota 53) do tutorial do Amazon Linux 2.