Isso deve funcionar:
<a href="./some_workbook.xlsx#sheet_foo!A7">Refer to entry bar in sheet foo</a>
Em sua postagem, você usou um ponto de interrogação (?) em vez de um sinal de hash (#). Não há necessidade de cifrões ($) para o intervalo.
Referências:
link
de acordo com a página, isso funciona "desde que a página HTML seja acessada via http (não clicando duas vezes no Windows Explorer, nem usando file: //) e o Excel seja aberto no navegador. Se o Excel estiver aberto fora do navegador, ele não se moverá para o link especificado. "