Selecione as linhas que você quer apagar e tecle Ctrl + - (menos). Se você selecionar a linha inteira, você não será avisado, se você selecionar apenas algumas células, você será perguntado o que você quer fazer exatamente.
Editar: btw. Ctrl + + insere linhas.