Para ser um pouco mais explícito do que a resposta do @Miroslav:
1 As dependências
#64-bit ('x86_64') C library and headers
yum install libgcc
yum install glibc-devel
# 32-bit (‘i386’) C library and headers
yum install libgcc.i686
yum install glibc-devel.i686
Veja todos eles em Pré-requisitos do GCC .
2 Em seguida, compile com --enable-multilib
../configure --enable-languages=all --prefix=/usr/local/gcc --enable-multilib
Editar.
Nota lateral: Não compile no mesmo diretório, pois posso ver ./configure
em seu exemplo. Veja Instalando o GCC
Do not run ./configure, this is not supported, you need to run configure from outside the source directory