Eu estava tentando consertar esse problema por duas semanas e não obtive resultado. E eu encontro resposta imediatamente depois de criar esta pergunta.
Eu só desabilitei a aceleração de hardware no Google Chrome e as cores estão normais.
Não é uma boa decisão e ainda preciso de ajuda com os drivers da AMD. Mas é outra questão.
Esta questão está completa. Se você tiver alguns problemas com cores no Google Chrome, tente desativar a aceleração de hardware.