Como mostrar o progresso da transferência e velocidade ao copiar arquivos com cp?

Question

Caso contrário, existe algum utilitário alternativo de linha de comando que possa conseguir isso?

    

Answer 1

Embora cp não tenha essa funcionalidade, você pode usar pv para fazer isso:

pv my_big_file > backup/my_big_file

Observação: esse método perderá as permissões e a propriedade do arquivo. Os arquivos copiados dessa maneira terão as mesmas permissões que você criou e pertencerão a você.

Neste exemplo, pv basicamente apenas exibe o arquivo para stdout *, que você redireciona para um arquivo usando o operador > . Simultaneamente, ele imprime informações sobre o progresso para o terminal quando você faz isso.

Isto é o que parece:

stefano@ubuntu:~/Data$ pv my_big_file > backup/my_big_file
 138MB 0:00:01 [73.3MB/s] [=================================>] 100% 

Você pode precisar Instalarpv(alternativamente,digitesudoapt-getinstallpv)noseusistema.

*:Obittécnico

Existemtrêsfluxosimportantesdedadosemumsistemasimilaraounix:stdout(saídapadrão),stderr(erropadrão)estdin(entradapadrão).Todoprogramatemtodosostrês,porassimdizer.Ooperadorderedirecionamento>redirecionaasaídadoprogramaparaumarquivo.Semargumentos,comovocêvêacima,>redirecionaasaídapadrãodeumprogramaparaumarquivo.cpbasicamentenãofaznadamaisextravagantedoque

catsource>destination

(ondecatapenaslêumarquivoeimprimeparastdout).pvéapenascomocat,massevocêredirecionarseufluxodesaídaparaalgumoutrolugar,eleimprimiráasinformaçõesdeprogressoparastdout.

Dêumaolhadaemmanpvparasabermaissobreisso.

Outraopção,como DoRsugereem esta resposta , é usar o rsync:

$ rsync -ah --progress source-file destination-file
sending incremental file list
source-file
        621.22M  57%  283.86MB/s    0:00:01

Isso preservará as permissões / propriedade dos arquivos enquanto exibe o progresso.

    

Answer 2

Não há. Veja aqui sobre o porquê. Embora faça mais do que você precisa, o rsync tem um com o parâmetro --progress . O -a manterá as permissões, etc, e -h será legível por humanos.

rsync -ah --progress source destination

A saída será algo como isto:

Pictures/1.jpg
      2.13M 100%    2.28MB/s    0:00:00 (xfr#5898, to-chk=1/5905)
Pictures/2.jpg
      1.68M 100%    1.76MB/s    0:00:00 (xfr#5899, to-chk=0/5905)

    

Answer 3

Se você quiser ver se seus arquivos estão sendo transferidos corretamente, você pode usar gcp e gcp como cp, mas, por padrão, fornece uma barra de progresso para que você possa ver o que está sendo copiado. Como as notas do wiki do programa, gcp tem vários recursos úteis, como

% bl0ck_qu0te%

No entanto, mesmo quando a barra de progresso atingir 100% ao usar a ferramenta, você deve aguardar até que o prompt do terminal reapareça antes de remover sua mídia com segurança para garantir que o processo de transferência tenha sido concluído com êxito.

gcp é usado para copiar arquivos e possui opções como --preserve para que vários atributos e permissões possam ser preservados e --recursive para que diretórios inteiros possam ser copiados. Mais informações sobre suas opções podem ser encontradas inserindo man gcp ou indo para as páginas do Ubuntu online . Um tutorial também está disponível neste site .

Instale gcp dos repositórios com

sudo apt-get install gcp

( Nota : no Ubuntu 12.10 o novo ponto de montagem automática é, por exemplo, /media/user/usbdisk )

Você pode copiar um arquivo para sua mídia digitando

gcp /home/mike/file.mp4 /media/usb

e copie uma pasta para sua mídia com

gcp -rv ~/Podcasts /media/Mik2

Exemplo de saída de gcp com a barra de progresso:

gcp ~/Videos_incIplayer/mars.flv /media/Mik2
Copying 168.57 MiB 100% |########################################################|   7.98 M/s Time: 00:00:22

É claro que você pode especificar vários arquivos ou pastas para copiar para o seu disco, e há muitas outras opções cobertas em man gcp .

    

Answer 4

Eu adoro usar o cURL para esse propósito exato. A página man lista o protocolo "FILE" como suportado, portanto, use-o como qualquer outro protocolo em um URL:

curl -o destination FILE://source

Velocidade, progresso, tempo restante e muito mais - tudo em um formato familiar.

    

Answer 5

Embora não exiba velocidade, ao copiar vários arquivos, a opção -v para o comando cp fornecerá informações de progresso. por exemplo,

cp -rv old-directory new-directory

    

Answer 6

O kernel conhece a maioria dos dados, como velocidade e, muitas vezes, também porcentagem. Kernels modernos expõem isso através de seu sistema de arquivos / proc.

mostrapeed de link usa essa informação. Ele pode ser anexado a programas já em execução e fornecer atualizações periódicas como esta:

$ dd if=bigfile of=/tmp/otherbigfile &
$ showspeed dd
dd looks like a process name. pid=4417 matches av0=dd.
p/4417/fd/0r /home/jw/bigfile 113MB/s (12%, 2.3GB)  9m:35
p/4417/fd/1w /tmp/otherbigfile 182MB/s (2.6GB)
p/4417/fd/0r /home/jw/bigfile 285MB/s (15%, 3.0GB)  8m:08
p/4417/fd/0r /home/jw/bigfile 115MB/s (16%, 3.2GB)  8m:01
p/4417/fd/0r /home/jw/bigfile 107MB/s (17%, 3.4GB)  7m:39
p/4417/fd/1w /tmp/otherbigfile 104MB/s (3.5GB)
p/4417/fd/0r /home/jw/bigfile 139MB/s (19%, 3.7GB)  7m:37
p/4417/fd/0r /home/jw/bigfile 116MB/s (20%, 3.9GB)  7m:18
p/4417/fd/1w /tmp/otherbigfile  67MB/s (4.0GB)
p/4417/fd/1w /tmp/otherbigfile 100MB/s (4.1GB)
...

    

Answer 7

Embora pv possa lidar com as tarefas locais cp , usar dd com pv pode lidar com tarefas locais ( cp ) e remotas ( scp ).

dd if=path/to/source.mkv | pv | dd of=path/to/dest.mkv

Verifique se path/to/dest.mkv sai por touch path/to/dest.mkv

Isso pode mostrar o progresso, mas se você quiser as informações de porcentagem,

dd if=path/to/source.mkv | pv -s 100M | dd of=path/to/dest.mkv

Substitua 100M acima pelo tamanho real do seu arquivo de origem.

Aqui vem a parte remota

Embora scp dificilmente mostre o progresso atual, usar dd com pv é muito fácil.

ssh onemach@myotherhost dd if=path/to/source.mkv | pv -s 100M | dd of=path/to/dest.mkv

    

Answer 8

Existe uma ferramenta chamada progress nos repositórios que é capaz de examinar vários comandos diferentes e exibir informações de progresso para eles.

Instale-o usando o comando

sudo apt-get install progress

Esta ferramenta pode ser usada assim:

cp bigfile newfile & progress -mp $!

Saída:

[11471] cp /media/Backup/Downloads/FILENAME.file 
        29.9% (24.2 MiB / 16 MiB)

    

Answer 9

Existe uma nova ferramenta chamada cv que pode encontrar qualquer descritor relacionado a um comando em execução e mostrar o progresso e a velocidade: link

cv -w

mostra as estatísticas de todas as operações em cp, mv etc.

    

Answer 10

Como muitos disseram, o cp não inclui essa funcionalidade.

Só para jogar $ 0,02, o que geralmente faço com situações triviais de cópia (ou seja, sem -R ):

1. Veja o tamanho do arquivo e lembre-se

2. Comece a copiar

3. Abra outro terminal

4. Execute watch ls -lh DIR no diretório em que o destino é

Isso pode me manter atualizada no tamanho do arquivo de destino, com um mínimo de problemas.

Como uma alternativa para situações menos triviais, por exemplo copiando recursivamente os diretórios, você pode usar watch du -hs DIR para ver o resumo do tamanho da DIR. No entanto du pode demorar muito para computar e pode até retardar a cópia, então você pode querer usar o argumento -n INTERVAL para observar, para que o trade-off seja aceitável.

Atualização: Caso você use curingas com o comando usado com watch du, por exemplo watch du -hs backup/* , não se esqueça de citar:

watch "du -hs backup/*"

caso contrário, os curingas serão expandidos somente uma vez , quando o watch for iniciado para que du não olhe para novos arquivos / subdiretórios.

    

Answer 11

dd status=progress

Opção adicionada no GNU Coreutils 8.24+ (Ubuntu 16.04):

dd if=src of=dst status=progress

O terminal mostra uma linha do tipo:

462858752 bytes (463 MB, 441 MiB) copied, 38 s, 12,2 MB/s

Veja também: Como você monitora o progresso do dd?

    

Answer 12

Dependendo do que você deseja fazer, o Midnight Commander ( mc ) pode ser a resposta. Estou surpreso que não tenha sido mencionado ainda.

Ferramentas como pv ou rsync são boas para exibir o progresso da transferência de um arquivo enorme, mas quando se trata de copiar diretórios / árvores inteiros, mc calcula o tamanho e exibe o progresso muito bem. Além disso, está disponível imediatamente na maioria dos sistemas.

    

Answer 13

Use um script de shell:

#!/bin/sh
cp_p()
{
   strace -q -ewrite cp -- "${1}" "${2}" 2>&1 \
      | awk '{
        count += $NF
            if (count % 10 == 0) {
               percent = count / total_size * 100
               printf "%3d%% [", percent
               for (i=0;i<=percent;i++)
                  printf "="
               printf ">"
               for (i=percent;i<100;i++)
                  printf " "
               printf "]\r"
            }
         }
         END { print "" }' total_size=$(stat -c '%s' "${1}") count=0
}

Isto será parecido com:

% cp_p /home/echox/foo.dat /home/echox/bar.dat
66% [===============================>                      ]

Fonte

    

Answer 14

Se você tiver o rsync 3.1 ou superior ( rsync --version ), poderá copiar (cp -Rpn) preservando as permissões e a propriedade, recriar diretórios, "no clobber" e exibir o progresso geral (em vez de apenas progredir por arquivo) , taxa de cópia e tempo estimado (muito aproximado) restante com:

sudo rsync -a --info=progress2 --no-i-r /source /destination

Note que o sudo só é necessário se estiver lidando com diretórios / arquivos que você não possui. Além disso, sem o --no-i-r , o percentual pode redefinir para um número menor em algum momento durante a cópia. Talvez versões posteriores do rsync sejam padronizadas como no-i-r com info = progress2, mas isso não acontece na versão atual do 3.1.2.

Descobri que a porcentagem e o tempo restantes são superestimados quando copiados para um diretório que já contém arquivos (por exemplo, quando você normalmente usaria cp -n "no clobber").

    

Answer 15

Mais uma opção para preservar os atributos pode ser (se source for uma pasta, ela será criada em destination )

tar -c source | pv -e -t -p -r | tar -C destination  -x

espero que possa ser útil para alguém. Para ter o tempo estimado de transferência, isso pode ser alcançado fazendo do -s source antecipadamente e passando-o como um parâmetro -s <size> para pv .

    

Answer 16

Você pode copiar qualquer programa. Ao mesmo tempo, você pode iniciar sudo iotop e ver a velocidade real de leitura / gravação do disco sem progredir.

    

Answer 17

Verifique o código fonte de progress_bar no repositório git abaixo

link

Experimente também o pacote de scripts personalizado supremo

Faça o download do arquivo deb e instale na distribuição baseada no Debian ou baixe os arquivos fonte, modifique e use para outras distros

Visão geral da funcionalidade

(1) Aplicativos abertos ----Raposa de fogo ----Calculadora ---- Configurações

(2) Gerenciar arquivos ----Procurar ----Navegar ---- Acesso rápido

            |----Select File(s)
            |----Inverse Selection
            |----Make directory
            |----Make file
                                          |----Open
                                          |----Copy
                                          |----Move
                                          |----Delete
                                          |----Rename
                                          |----Send to Device
                                          |----Properties

(3) Gerenciar telefone ---- Mover / Copiar do telefone ---- Mover / Copiar para o telefone ---- Pastas de sincronização

(4) Gerenciar USB ---- Mover / Copiar de USB ---- Mover / Copiar para USB