O que você está dizendo está correto. Enviado é quando você envia a mensagem. Recebido é quando o servidor de correio recebe a mensagem. Modificado é quando o computador recupera a mensagem do servidor. Se o cliente de e-mail estiver ligado, o recebimento e a modificação serão muito próximos um do outro. Modificado deve ser depois de recebido, mesmo que seja milissegundos atrás.
Com base nos detalhes técnicos e no que descreveu, a explicação do seu colega é apoiada pelos detalhes técnicos.