Você pode fazer isso aplicando um filtro.
O que você quer fazer é o seguinte: Vá para Data
> Filter
Você verá que, no topo de cada coluna, uma caixa suspensa agora é exibida.
Para cada coluna, pressione a pequena seta ao lado do nome da coluna e configure-a para conter os dados. Repita isso para todas as colunas.
Lembre-se de que filtrar mais colunas mesclará todos os filtros.
O resultado deve ser o que você deseja alcançar no final, se você tiver excluído todas as células vazias.
Você ainda pode visualizar tudo limpando o filtro ou pode optar por copiar o que você tem agora para uma nova planilha para se livrar de todas as células vazias.
Lembre-se de que, se você selecionasse, apenas células vazias por coluna, ele mostraria apenas linhas vazias, pois todos os filtros são aplicados ao resultado final e basicamente você diz: mostre-me apenas as linhas vazias.