Não há como retornar a cor exata de uma célula usando funções internas do Excel, somente se a célula estiver colorida ou não.
Para fazer isso, você precisa usar uma função definida pelo usuário que possa retornar a cor da célula, como este exemplo. Outro link útil está aqui que indica que mesmo essas funções definidas pelo usuário podem ter problemas se a célula estiver colorida por meio de formatação condicional. Novamente, eu recomendo que, em vez de colorir à mão ou por formatação condicional para indicar algum estado, você faça desse estado parte dos dados.
Talvez uma solução alternativa seja considerar quais critérios você está usando para aplicar a formatação e, em vez disso, usar esse critério para algum tipo de filtro.