De acordo com o Bug 38415 este é um problema conhecido e está marcado como WONTFIX . O Firefox está sempre no modo de inserção e é isso.
Provavelmente, é melhor procurar em extensões como It's All Text! , por exemplo. Esta extensão permite editar textareas usando um editor externo de sua escolha.