Absolutamente sem problemas.
Não há virtualmente nenhuma operação atual em seu disco rígido (se houver!), portanto, não há arquivos em seu disco rígido que serão danificados com o computador sendo desligado repentinamente. Na verdade, desligar o computador com o botão liga / desliga é o método recomendado nos fóruns do Ubuntu (quando o computador está em grub).