Você pode facilitar com uma coluna auxiliar.
Use por exemplo esta fórmula para marcar linhas com conteúdo:
=IF(COUNTA(A2:C2)>0,1,"")
Agoravocêpodeselecionarsuacolunaauxiliar,F5-especial-marcar"fórmula" e desmarcar "número", isso seleciona todas as linhas vazias.
Apenas clique com o botão direito em um deles e delete - linha inteira.