Encontrei uma resposta neste site e recebi meu cartão funcionando. Eu tinha instalado o driver correto, mas aparentemente o 14.04 tinha instalado por padrão o material bcmwl e broadcom-sta que estava sobrescrevendo os pacotes b43 que eu tinha instalado.
A resposta pode ser encontrada em: Broadcom B43 WiFi não funciona em Ubuntu 14.04 LTS