Para classificar arquivos por tamanho, você pode usar o comando ls com a opção -S :
ls -lhS
Para ordem inversa, use a opção -r :
ls -lhSr
Também usei a opção -l para usar um formato de listagem longo e a opção -h para imprimir tamanhos em formato legível (por exemplo, 300 KB ou 129,1 MB ou 251 MB)
Veja man ls para mais informações.