Se a coluna B é onde você tem seus dados com algumas linhas vazias, em A1 se B1 é < > "" não vazia escreva 1, se vazio escreva 0, em A2 escreva o seguinte:
=IF(B2="","",MAX($A$1:A1)+1)
A fórmula testará a célula adjacente se vazia retornará vazia
se houver dados, Max encontrará o número máximo na coluna A e adicionará 1 a ele.
você pode arrastar a fórmula para baixo