Você não salvará mais do que alguns bytes removendo /usr/bin/X11
porque é um link simbólico para o diretório /usr/bin
:
$ ls -l X11
lrwxrwxrwx 1 root root 1 Sep 9 2011 X11 -> .
$ readlink -f X11
/usr/bin
Para realmente liberar algum espaço, veja também Como faço para liberar espaço em disco?