O modo de colagem não se destina a longos períodos de digitação. Ele existe apenas para superar as limitações de longa data do Vim quando executado em um terminal. Você não deve usá-lo para nada além de colar texto com o botão do meio do mouse.
É por isso que existe set pastetoggle="<F12>" : quer colar algo? Pressione <F12> para entrar no modo de colagem, cole e pressione <F12> novamente para sair do modo de colagem.
Como alternativa, use "*p ou "+p se sua versão do Vim for compatível.