Sim, é isso que o instalador do Debian faz. Se você não quer apenas usar o instalador debian (possivelmente no netinst cd, que não tem nenhum pacote no cd e faz o download de tudo o que você escolhe instalar), então você pode usar debootstrap
para inicializar um mínimo sistema que é capaz de instalar mais pacotes.