Numpy e Scipy são animais estranhos. O grande incômodo é a incompatibilidade do Fortran ABI , entre outras coisas. Na página de instalação :
If your blas/lapack/atlas is built with g77, you must use g77 when building numpy and scipy;
If your atlas is built with gfortran, you must build numpy/scipy with gfortran.
Execute ldd
na versão do Atlas que você possui.
Se libg2c.so for uma dependência, o g77 foi usado e você precisará passar essas opções ao criar:
python setup.py build --fcompiler=gnu
Alternativamente, se libgfortran.so for uma dependência, ele foi construído com gfortran e você precisará configurar o compilador fortran apropriado:
python setup.py build --fcompiler=gnu95
Como observação, se os processadores em que sua máquina está rodando incluem suporte a SIMD, sugiro que você instale as versões otimizadas do atlas (por exemplo, atlas3-sse).