Perguntas sobre 'parallelism'

Tags
2
respostas

Execute 2 comandos em paralelo, mas espere apenas que um comando termine antes de iniciar o próximo

Eu configurei vários processos em segundo plano que precisam concluir o processamento antes que o próximo processo possa ser iniciado. Embora eu tenha configurado, há uma etapa em que dois programas precisam ser iniciados ao mesmo tempo, mas eu...
16.03.2017 / 16:14
1
resposta

Como posso executar este script bash em paralelo?

Eu preciso que isso seja mais eficiente Neste momento, demora até 20 horas, dependendo da linha (estes são conjuntos de dados MCS razoavelmente grandes). Divida arquivos grandes de dados em suas "fotos" Cria uma lista de cada nome de...
23.03.2017 / 18:26
2
respostas

gzip * .txt vs gzip test.txt & gzip test2.txt &

Estou procurando acelerar o processo do gzip. (servidor é AIX 7.1) Mais especificamente, a implementação atual é com gzip *.txt e leva até 1h para ser concluída. (as extrações de arquivos são muito grandes e temos um total de 10 arquivos)...
12.07.2017 / 11:07
2
respostas

Executando comandos consequentemente em várias pastas

Eu tenho a pasta pai "pai". Dentro dessa pasta eu tenho subpastas e um arquivo chamado "names.txt". este arquivo inclui os nomes dessas subpastas da seguinte forma: Parent_folder folder1 folder2 folder3 folder4 . . . . names.txt O conteúd...
08.07.2016 / 01:03
1
resposta

Posso esperar escalonamento linear com o GNU Parallel

Estou usando o GNU Parallel para realizar benchmarking usando 20 núcleos para testar o speedup em comparação a fazer o mesmo trabalho em apenas 1 core. Devo esperar escala linear quase completa, ou seja, meu cálculo será aproximadamente 20x mais...
19.08.2016 / 07:20
1
resposta

Como executar o Abinit via MPI?

Estou tentando executar Abinit em paralelo, já que no modo sequencial leva muito tempo. Eu segui todos os passos nos abinit tutoriais para executá-lo em paralelo, e eles dizem para usar o OpenMPI, mas eu não conseguia fazê-lo funcionar (ele ap...
28.10.2011 / 18:17
1
resposta

Execute o script GNU Octave em vários núcleos

Estou computando simulações de Monte Carlo usando o GNU Octave 4.0.0 no meu PC de 4 núcleos. A simulação leva quase 4 horas para calcular o script por 50.000 vezes (específico para o meu problema), o que é muito tempo gasto para computação. Eu q...
18.05.2016 / 15:53
1
resposta

pergunta de comandos de CLI multicore

Eu tenho uma coleção de 150 comandos CLI para executar em um arquivo, na minha máquina de 12 núcleos. Executar todas as 150 tarefas em segundo plano prejudica o sistema e descobri por experiência que ter 12 a 18 tarefas em execução é ideal. N...
19.02.2016 / 01:07
2
respostas

Arquivos .lzo não compactados em paralelo e, em seguida, exclua os arquivos .lzo originais

Portanto, eu tenho .lzo arquivos na pasta /test01/primary , e preciso descompactar e excluir todos os arquivos .lzo . A mesma coisa que preciso fazer na pasta /test02/secondary também. Eu terei cerca de 150% de arquivos.lzo em ambas as...
09.10.2015 / 22:05
3
respostas

Como dividir o array em um conjunto de cinco arquivos e baixá-los em paralelo?

Estou tentando copiar arquivos de testMachineB e testMachineC para testMachineA enquanto estou executando meu script de shell em testMachineA . Se o arquivo não estiver em testMachineB , ele deverá estar em testMachineC , com c...
04.05.2014 / 20:45