Pesquisar por:
(_\w+)
Substituir por:
\U$1
... e pronto! (Certifique-se de clicar no botão de opção "Expressão regular" no canto inferior esquerdo).
Meu teste foi o seguinte.
Antes:
Hi, this is a test _with some _words starting _WITH _Underscores
Let's try to _toUpper them all!
Depois:
Hi, this is a test _WITH some _WORDS starting _WITH _UNDERSCORES
Let's try to _TOUPPER them all!
Boa sorte!