Tente usar o wicd em vez do gerenciador de rede nativo. Eu tive problemas semelhantes, principalmente relacionados a desconexões inesperadas do wifi - depois de atualizar para o 11.04. Eu nunca tive esse problema em versões anteriores do Ubuntu para ser honesto.