O Windows trata os nomes de arquivos de formas aparentemente estranhas, e como não faz distinção entre maiúsculas e minúsculas, é possível descobrir que tentar alterar o nome de um nome de arquivo pode ser problemático. Coisa não é ajudar pelo fato de que, por exemplo, se o nome do arquivo é todo em maiúsculas, ele será exibido no caso inicial, o que dificulta saber em que caso o nome do arquivo realmente existe.
A solução mais simples é excluir o arquivo e recriá-lo ou renomeá-lo para algo completamente diferente e, em seguida, voltar ao nome que você realmente deseja. Então, no seu caso, você iria:
Blue.png -> green.png -> blue.png
Se você estiver usando o controle de origem, precisará executar essa renomeação no aplicativo de controle de origem, e não no Windows. Neste caso, o Windows está sendo informado de qual é o nome e você não pode modificá-lo.