Isso ocorre por design.
A partir das 12.04 Notas da versão
Backports agora estão mais acessíveis - para permitir que os usuários recebam mais facilmente novas versões de software, o repositório Ubuntu Backports agora está habilitado por padrão. Pacotes de backports não serão instalados por padrão - eles devem ser explicitamente selecionados no software de gerenciamento de pacotes. No entanto, uma vez instalados, os pacotes de backports serão atualizados automaticamente para versões mais recentes.
PS: Eu duvido muito que exista algo relacionado a wireless (ou qualquer outro tipo de driver) nos backports.
PPS: Não tenho certeza do que vai acontecer em Raring.