Você pode usar formatação condicional para isso. Você precisa de duas regras. Selecione a primeira coluna de datas e crie um novo formato condicional com uma fórmula: Faixa de opções inicial > Formatação condicional > Nova regra > Use uma fórmula para determinar. Digite esta fórmula
=$A1>$B1
Observe o posicionamento dos sinais $. Eles são importantes!
Selecione um preenchimento. Em seguida, selecione a segunda coluna de datas e crie uma regra com a fórmula
=$B1>$A1
Aqui está uma captura de tela: