Não é um problema de desempenho, é um problema de solução de problemas e correção de problemas. /boot
é o local do bootstrap - existem alguns arquivos que iniciam tudo o mais no seu sistema.
E às vezes você precisa procurar lá para corrigir um problema (como configuração do grub ou similar).
Se você tiver que fazer isso, é útil ter um tipo de sistema de arquivos de menor denominador comum, para torná-lo o mais fácil possível, por exemplo, você tem que remover a unidade e colocá-lo em outra caixa para editar um arquivo de configuração.
Se você está nesta posição, você não quer ter que 'falsificar' o seu LVM para a vida apenas para poder lê-lo :).