O problema está no design do driver rts5139, que está na parte 'temporário' na hierarquia do kernel, o que significa que ainda não está de acordo com os padrões de qualidade de alguns dos outros drivers.
Parece, no entanto, que o problema foi confirmado na lista de discussão de desenvolvimento do driver Linux em maio. No entanto até agora não estou vendo mudanças depois disso em a árvore do kernel que afetaria o problema real. Posso confirmar que estou vendo a pesquisa na minha máquina no Ubuntu 12.10, e estou fazendo o incômodo 'rmmod rts5139' em /etc/rc.local para não usar o leitor de cartão por padrão (eu só o uso raramente) .