Se você olhar para man sort , verá que a classificação (GNU) permite que você especifique o campo para classificar. Experimente:
sort -n -t: -k4 -r
-n significa classificar numericamente em vez de lexicograficamente.
-t: diz para usar : para delimitar (dividir) campos.
-k4 diz para usar o quarto campo.
-r diz para reverter o resultado.
Isso tem a desvantagem de não funcionar quando você tem um : no nome do arquivo (o que mudará os campos / colunas). Se isso é um requisito, a maneira mais fácil de usar seria um script (por exemplo, perl ou python).