Totalmente igual a você, sou um artista canhoto que desenha no Surface Pro 4 e constantemente ativa o modo de exibição de tarefa, é muito chato.
Depois de horas olhando em vários fóruns sem sucesso, finalmente encontrei algo que funciona! Eu baixei o "Skip Metro Suite", um software de terceiros, e instalei-o e depois reiniciei. Hahaha Eu soo totalmente como uma mensagem de spam agora, mas parece que está funcionando muito bem até agora (apenas instalei minutos atrás antes deste post)! Ainda posso usar a tela sensível ao toque, o que é excelente (por exemplo, melhor do que desativar o HID no Gerenciador de dispositivos).
Os fóruns que eu encontrei esta informação mencionada ter que ajustar algumas configurações ao usá-lo para o Surface Pro 3, mas você tem um Surface Pro 4, então espero que funcione para você tão facilmente como para mim!
Eu estou indo em todos os fóruns anteriores que eu visitei e compartilhando isso, haha. Nenhum usuário do Surface Pro 4 deve ficar sem essa dica! : D