Sim, isso deve ser possível. Supondo que você esteja na versão mais recente do OneNote da área de trabalho, você pode usar o editor de equações, que contém vários desses atalhos de estilo LaTeX.
Primeiro, você precisará inserir uma equação, o que pode ser feito usando a faixa de opções ou o atalho ALT + =.
_ e ^ produzirá subscrito e sobrescrito depois que você digitar um espaço. Há outros atalhos bacanas também; \ pi por exemplo irá produzir um símbolo pi, por exemplo. Essa pergunta de superusuário na verdade tem uma descrição mais detalhada.
Espero que isso ajude!