Encontrou uma solução. make -j não está certo. Deve ter algum número depois de j como o seguinte
make -j2
O comando acima significa executar make em dois encadeamentos paralelos. Eu sugeri uma edição para o escritor do wiki opencv.