12.04 tem requisitos de sistema muito sérios, foi um grande salto em relação às versões anteriores, então isso pode ser uma surpresa para muitos usuários, mas o downgrade não é possível, até onde eu sei.
A desinstalação é realmente simples, basta copiar todos os arquivos que você precisa para o seu outro SO (acho que é o Win), então pegue um CD de instalação ou pendrive 11.04, conecte ao seu computador e inicialize a partir dele. Depois de alguns minutos, ele perguntará o que você quer fazer, tentar ou instalar o Ubuntu 11.04. Escolha instalar e, quando perguntar sobre partições, escolha o modo avançado. Em seguida, escolha a partição, onde o 12.04 estabelece, clique nele e escolha excluir. Em seguida, clique no botão Adicionar, escolha o tamanho, o sistema de arquivos ext4 e a marca do traço (/) como raiz. Do que clique ok, depois continue, e ele instalará o 11.04, enquanto deletar 12.04.