Eu acho que não deve haver um problema com relação à estabilidade do sistema em geral com a adição deste PPA e a instalação deste e / ou kernels subseqüentes.
Afinal, novas versões são adicionadas à lista dos kernels já instalados, eles não substituem os antigos. Se um novo kernel quebrar seu sistema, você pode sempre reiniciar e selecionar um dos outros.
Quanto às atualizações de software, eu também não acho que você vai enfrentar problemas sérios.
A maior parte do desenvolvimento do kernel tem a ver com programação de baixo nível (IRQs, problemas de compatibilidade de hardware, etc.) e atualizações secundárias de versão podem produzir algumas incompatibilidades, mas provavelmente não irão quebrar todo o seu sistema.
Como você afirma no seu comentário para o akbozo, você está disposto a testar seu sistema e não terá problemas para reinstalar se algo der errado.
Então eu diria que você vai com isso.