Isso pode ser resolvido usando a seguinte fórmula para formatação condicional:
=IF(AND(NOT(ISBLANK(A1))),NOT(ISNUMBER(A1)))
* Substitua A1 por sua (s) célula (s) relevante (s)
Certifique-se de selecionar a opção "Usar uma fórmula para determinar quais células devem ser formatadas" sob a criação de uma nova regra para que isso funcione corretamente.