Seu diretório pessoal deve ser usado para seus próprios arquivos, o que significa que você definitivamente pode usá-lo com diferentes distribuições. O problema pode surgir se você usar uma versão diferente do mesmo software, o mais antigo pode quebrar devido a alterações incompatíveis nos arquivos de configuração, mas isso não deve ocorrer se as versões não forem muito distantes.