O Ubuntu (e Linux em geral) usa o formato do cursor X11, que não é suportado pelo Windows. No Ubuntu, esses arquivos estão localizados em /usr/share/icons/<name-of-cursor-theme> . O padrão é DMZ-White.
Se você quiser usar o tema do cursor DMZ no Windows, você pode usar esse conjunto convertido para o formato de cursor do Windows: link