Você já respondeu a si mesmo com uma macro, mas aqui está uma solução não VBA. É uma fórmula de matriz e deve ser confirmada com ctrl + shift + enter:
=(SUM(IFERROR(1/COUNTIF(A1:A3,A1:A3),0))=1)
Essa fórmula conta o número de valores exclusivos em seu intervalo, ignorando as células em branco. Se o número de valores exclusivos for 1, todos os valores serão iguais e a fórmula retornará TRUE. A única coisa que não foi especificada na sua pergunta é o que fazer se cada célula estiver em branco. No momento, a fórmula retornará TRUE, mas seria fácil adicionar alguma lógica adicional para alterar isso.