Você pode definir a variável de configuração pager.diff para desabilitar o pager para subcomandos específicos. Veja pager.<cmd> em git-config (1) .
git config --global pager.diff false
Deixe de fora --global se você quiser apenas fazer essa alteração de configuração para o repositório atual.