O sistema não rastreia essas informações. Toda vez que o arquivo é modificado, a nova hora de modificação sobrescreve a anterior.
Dependendo do que exatamente você precisa fazer, várias soluções alternativas podem ser aplicadas, como usar um sistema de controle de versão ou ter um daemon que cuida das alterações usando o inotify. Mas todas essas soluções dependeriam de algo além do campo de tempo de modificação, conforme relatado por stat
.