Você parece ter interpretado mal / omitido as informações. Vamos revisitar os tópicos :help :
'" '" To the cursor position when last exiting the current buffer. Defaults to the first character of the first line.
Trata-se de sair (ou sair) do buffer. A segunda frase também explica o comportamento em um novo arquivo.
'. '. To the position where the last change was made.
Apenas esta marca é sobre modificações . Também é útil: gi , que salta para a última posição de inserção e vai para o modo de inserção.