Isto é devido a um processo chamado "caching". O sistema operacional tenta acelerar as operações de arquivo armazenando algumas delas na memória. Assim, o processo de cópia começa a uma velocidade muito maior do que o seu pendrive poderia manipular, porque a maior parte é armazenada temporariamente na memória principal. No entanto, o Windows também começa a gravar no pendrive USB em segundo plano e, conforme o processo de cópia continua, ele notará que o buffer de memória é preenchido e, portanto, o processo fica mais lento.
No final, o buffer ainda contém dados que precisam ser gravados no pendrive, e é por isso que há um atraso enquanto ele está fazendo isso.