Parece que o seu Vim está no modo compatível com o vi; :set compatible? imprimirá compatible então.
Você precisa criar um arquivo ~/.vimrc (um vazio será suficiente) para alternar o Vim para o modo nocompatible . Em geral, é recomendado colocar suas personalizações lá e deixar .gvimrc para as poucas configurações somente de GUI.