Você provavelmente deve compará-lo usando o mesmo hardware em um ambiente que não seja de produção.
Eu fiz isso em uma matriz moderadamente inteligente (Dell Powervault MD3000) e descobri que o agendador noop venceu o padrão cfq por um bocado significativo na minha carga de trabalho.
Isso definitivamente depende da sua carga de trabalho e pode não fazer diferença para alguns. Pelo que ouvi, o escalonador noop é melhor para dispositivos que são "inteligentes" (controladores de raid com muitos spindles etc) ou muito rápidos (SSDs)