Você pode estar pensando demais nisso. Se o valor Data / Hora estiver na coluna X, você poderá usar Countifs como este
= Countifs (W: W, "S3", X: X, ">" & hoje ())
Isso contará as ocorrências do S3 somente para o dia atual.
Se você quiser usar a abordagem Address, você precisará envolvê-la em um INDIRECT, para que ela retorne um intervalo real, não apenas texto.
=COUNTIF(Indirect(
ADDRESS(1+12,11+MATCH(AG12, Plan!$L$12:$Z$12, 0),1,)
&":"&
ADDRESS(AG18,11+MATCH(AG12, Plan!$L$12:$Z$12, 0),1,)
)
,"S3")
Adicionei alguns recuos para melhor legibilidade.