Se você quiser encontrar o diretório que está ficando insano, tente
cd ${mountPointDirWhereThingsAreGettingTooTight}
du -s * | sort -n
.....
62719 usr
4043953 Pictures
4703272 AppData
5193812 VirtualBox VMs
8117498 Downloads
Em seguida, se um diretório se destacar como superdimensionado, você poderá cd nesse diretório e repetir o du ... e repetir até localizar o problema exato.
Você pode adicionar | tail -20 ou similar para reduzir a saída.
Muitos sistemas suportam k , m opções para indicar resultados em Kilobytes ou Megabytes.
Espero que isso ajude.