Você não está usando corretamente.
=if(And(B2,C2>3), "Yes", "No")
deve ser
=if(And(B2>3,C2>3), "Yes", "No")
Você precisa de uma condição para cada argumento de AND, não uma lista de células para testar uma única condição.
O mesmo para OR
=if(Or(B2>3,C2>3), "yes","No")
Isso permite que você teste diferentes condições por argumento, que é o comportamento projetado.
Atualmente, ele estará analisando seu primeiro argumento e decidirá se acha que é verdadeiro ou falso, baseado apenas no que encontrar nessa célula, o que terá um comportamento estranho dependendo do que o Excel acha que seria a resposta apropriada (por exemplo, 0 = falsa, 1 = verdadeira).