Eu acho que você precisa estender sua troca (partição ou arquivo) no começo. Eu estou tentando instalar o Oracle XE 10.2 no Debian Squeeze via (naturalmente usando o repositório oracle):
aptitude install oracle-xe oracle-xe-client
This system does not meet the minimum requirements for swap space. Based on the amount of physical memory available on the system, Oracle Client 10g Express Edition requires 502 MB of swap space. This system has 465 MB of swap space. Configure more swap space on the system and retry the installation.
Verifique o Oracle® Database Express Edition Guia de instalação do Linux . Eu suponho que também alguns parâmetros do kernel (via sysctl e /etc/sysctl.conf) precisam ser alterados.