Você não disse exatamente qual pacote você removeu, mas o único pacote semelhante instalado na minha máquina é libnspr4-0d . É uma dependência de um monte de coisas, então se você removê-lo, você terá que reinstalar um monte de coisas. gnome-panel é uma dessas coisas que você precisará reinstalar.
Recomendo, no entanto, que você também reinstale ubuntu-desktop para obter tudo de volta. No futuro, você não deve remover nada que comece com lib , a menos que você saiba o que está fazendo ou que seu gerenciador de pacotes informe que a biblioteca não é mais necessária.
A propósito, você só precisa de pacotes * -dev (como libnspr4-dev ) se você quer compilar software da fonte que tem uma dependência de tempo de compilação naquela biblioteca em particular.