Como o número no qual você deseja classificar parece ser sempre o segundo campo delimitado por sublinhado, você deve poder usar algo como
find path/to/dir/ -maxdepth 1 -name '*parameters.json' | sort -t_ -nk2,2 | tail -n1
Se você precisa lidar com a possibilidade de nomes de arquivos que contêm novas linhas, e seus utilitários principais o suportam, você pode transformar todo o comando delimitado por nulo, por exemplo,
find path/to/dir/ -maxdepth 1 -name '*parameters.json' -print0 | sort -zt_ -nk2,2 | tail -zn1