Perguntas sobre 'gnu-parallel'

Tags
1
resposta

Por que o trabalho paralelo do GNU com o “bash -c”?

% echo -e '1\n2' | parallel "bash -c 'echo :\' '' {}" :1 :2 % echo -e '1\n2' | parallel bash -c 'echo :\' '' {} % Eu esperaria que a segunda linha agisse da mesma forma.     
06.03.2017 / 14:02
3
respostas

Usando paralelamente no Ubuntu

Estou com um problema ao tentar usar o comando paralelo no Ubuntu 10.04. Eu olhei para a documentação paralela e alguns dos comandos parecem rodar. Em todos os casos, recebo o prompt de comando sem nenhuma ação. por exemplo. Eu estava tentando c...
16.02.2011 / 14:29
1
resposta

Uso da memória de limite paralelo GNU

É possível limitar o uso de memória de todos os processos iniciados pelo GNU paralelo? Percebo que existem maneiras de limitar o número de trabalhos, mas, nos casos em que não é fácil prever o uso de memória com antecedência, pode ser difícil aj...
11.12.2014 / 15:13
2
respostas

Como executar x instâncias de um script paralelo?

Eu tenho scripts que sempre gostaria de executar instâncias 'x' em paralelo. O código parece assim: for A in do for B in do (script1.sh $A $B;script2.sh $A $B) & done #B done #A Os próprios scripts executam consultas de...
24.06.2015 / 02:32
2
respostas

divida um arquivo, passe cada parte como um parâmetro para um script, execute cada script em paralelo

Eu tenho um words.txt com 10000 palavras (uma para uma linha). Eu tenho 5.000 documentos. Eu quero ver quais documentos contêm qual dessas palavras (com um padrão de regex em torno da palavra). Eu tenho um script.sh que greps os documentos e saí...
29.07.2014 / 02:53
2
respostas

Tarefas ssh paralelas ao GNU: O que acontece com um trabalho incompleto se o servidor morrer?

Suponha que queremos despachar trabalhos para uma coleção de servidores usando o GNU paralelo. O que aconteceria se um dos servidores morresse (falta de energia, desligamento térmico ...) enquanto ocupado executando um trabalho? O GNU paralelo a...
21.11.2016 / 15:39
2
respostas

gnu parallel: argumentos e espaços entre nomes de arquivos. Como resolver?

Isso está me deixando louco. Eu tenho um monte de mp3 que eu quero transcodificar usando ffmpeg . Estou tentando usar essa frase única (o script é maior, esta é a seção problemática): find . -type f \( -iname \*.mp3 \) | parallel ffmp...
15.05.2015 / 04:31
2
respostas

O GNU Parallel pode executar mais processos paralelos?

Posso, por exemplo, executar: parallel -j 200 < list0 Onde "lista" tem: nice -n -20 parallel -j 100 < list2 nice -n -20 parallel -j 100 < list1 Isso seria viável / possível?     
10.04.2014 / 06:52
2
respostas

Saída padrão Anexar às limitações de tamanho de arquivo

Estou obtendo as especificações VIN da API de Administração de Segurança no Trânsito em Autoestradas Nacionais para aproximadamente 25.000.000 de números VIN. Isso é uma grande quantidade de dados, e como eu não estou transformando os dados de f...
15.07.2018 / 03:28
2
respostas

Como obter o GNU paralelo no Amazon Linux?

De preferência sem precisar compilá-lo da fonte. Eu tentei adicionar repositórios que encontrei no Google: CentOS 6 e < href="http://download.opensuse.org/repositories/home:/tange/CentOS_CentOS-6/home:tange.repo"> CentOS 5 , mas ambos me dão:...
16.06.2016 / 00:36