Se houver uma maneira de fazer isso no console padrão do Windows, não o encontrei. Eu mudei para ConEmu , e Ctrl-PgUp e Ctrl-PgDn funcionam. Ctrl-UpArrow e Ctrl-DownArrow também funcionam.
ConEmu tem vários outros benefícios; temas de cores e melhor recortar e colar para citar alguns dos meus favoritos. Você pode executar o bash do WSL, o cmd, o PowerShell, o Cygwin e muito mais no ConEmu.