Finalmente eu entendi. Não sei se existe uma solução mais fácil, mas pelo menos funciona:)
O código é assim:
=SUM(INDIRECT(ADDRESS(COUNTA(B2:B1048576)-8;2)&":"&ADDRESS(COUNTA(B2:B1048576)+1;2)))
- O -8 é o número de linhas que você deseja voltar
- 2 é o número da coluna
- +1 é o deslocamento da linha final