Não de uma só vez, mas com uma pequena solução alternativa:
- Selecione a planilha inteira (por exemplo, clicando no quadrado vazio à esquerda do cabeçalho da coluna "A").
- Ativar o filtro automático.
- Na lista suspensa na parte superior de uma coluna, selecione "Esvaziar" em cada coluna até que você acabe com apenas linhas vazias.
- Selecione e exclua estes.
- Redefinir o filtro.
Suas linhas não vazias reaparecerão.