Eu também recomendo o LFS. Eu o construí várias vezes antes, e é insensatamente rápido. Eu construí um mecanismo de renderização CLI, e ele foi 100MB (não descarregado; eu poderia obtê-lo por volta de 10 a 20, mas eu sou muito preguiçoso). É difícil de construir, já que demora cerca de 8 horas no meu computador.
O bom é que você pode personalizar qualquer coisa para atender às suas necessidades. Ouvi falar de servidores Web de 3 MB sendo construídos com o LFS (o link está no post acima).
Boa sorte!