Infelizmente não, eles não funcionam no Windows. :help scroll-mouse-wheel
especificamente menciona que eles são para as GUIs X11:
For the X11 GUIs (Motif, Athena and GTK) scrolling the wheel generates key
presses <ScrollWheelUp>, <ScrollWheelDown>, <ScrollWheelLeft> and
<ScrollWheelRight>.