O .NET JIT pode ser atualizado para otimizar a aritmética de ponto flutuante de forma mais agressiva.
Se uma atualização do sistema operacional permitir o suporte de um conjunto de instruções mais novo, como o AVX2, isso também poderá alterar a maneira como o IL é colocado em ação.
Eu não consideraria as atualizações do JIT extremamente raras. Eles provavelmente não colocarão um em uma atualização de segurança, mas eu não ficaria surpreso em encontrar um que vá do .NET 4.5.0 para o 4.5.1.
Na verdade, o novo RyuJIT estará ativado por padrão na próxima versão .NET.
Além desse inteiro, uma instrução aritmética IEEE é executada sem o envolvimento do sistema operacional. Seu resultado é especificado exatamente (isso inclui operações de ponto flutuante).