Eu não tenho excel neste computador, mas a idéia básica é usar
=IF(ISNA(MATCH(A1, B:B, 0));A1;"")
Vou verificar se isso funciona em algumas horas.
Explicação: Defina o valor da célula atual para o valor de A1, se não houver nenhuma célula na coluna B que tenha um valor que corresponda exatamente ao valor da célula A1.