Veja aqui para uma explicação do termo "elf-hack". É basicamente uma otimização de linkers em tempo de compilação.
Na última postagem do blog desse link, o desempenho do JavaScript no benchmark dromaeo mostrou ser 0.6% melhor quando o firefox é compilado com o elf-hack.
Portanto, não, você não notará qualquer diferença no uso regular. Melhorias no gcc provavelmente permitirão o uso do 'elf-hack' no 11.10+ de qualquer maneira.