2
ответа

Объедините параллельные и последовательные команды

1. Резюме Я не понимаю, как я могу комбинировать параллельные и последовательные команды в Linux. 2. Ожидаемое поведение Псевдокод: pip install pipenv sequence pipenv install --dev параллельная задача npm ...
01.03.2018
2
ответа

Скопируйте несколько файлов в один dir с параллелью

Я использую следующий сценарий для копирования нескольких файлов в одну папку: {$BASE1 эха; $BASE2 эха; $BASE3 эха;} | параллельное CP-a {} $DEST Является там любым способом использовать только один $BASE эха с фигурной скобкой...
29.09.2017
2
ответа

scp не отображает вывод при использовании с параллелью гну

У меня есть короткий сценарий, который использует scp для копирования файлов во многие удаленные хосты (да, я знаю о rdist и rsync; им обоим не удается работать на несколько хостов - это не точка здесь; я только...
13.09.2017
2
ответа

Значение переменной не распознано после использования параллели гну?

Я имею ниже сценария оболочки, с которого я пытаюсь скопировать 5 файлов параллельно. Я выполняю мой ниже сценария оболочки на machineA, который пытается скопировать файл с machineB и машин. Если файл...
12.09.2017
2
ответа

BASH: параллельный запуск

У меня есть сценарий bash, который принимает на вход три массива одинаковой длины: METHODS, INFILES и OUTFILES. Этот сценарий позволит METHODS [i] решить проблему INFILES [i] и сохранить результат в OUTFILES [i], ...
06.05.2017
2
ответа

Как передать содержимое файла в параметр / параметр функции

У меня есть набор файлов .txt -пары. В каждой паре файлов File1 содержит одно целое число, а File2 - много строк текста. В сценарии, который я пишу, я хотел бы использовать целое число в File1, чтобы ...
26.04.2017
2
ответа

Почему Параллель GNU замедляется?

Я изучаю параллель GNU и попробовал следующее: $, поскольку я в {1.txt, 2.txt}; сделайте туалет времени-l $i; сделанный 100 1.txt настоящий 0m0.010s пользователь 0m0.000s sys 0m0.010s 10000012 2.txt настоящий 0m0.069s пользователь...
18.04.2017
2
ответа

GNU parallel ssh jobs: что происходит с незавершенным заданием, если сервер умирает?

Предположим, мы хотим отправить задания на набор серверов, используя GNU parallel. Что произойдет, если один из серверов выйдет из строя (сбой питания, тепловое отключение ...) во время выполнения задания? Будет ли GNU ...
21.11.2016
2
ответа

Выполнение команд последовательно для нескольких папок

У меня есть родительская папка "parent". Внутри этой папки у меня есть подпапки и файл с именем «names.txt». этот файл включает имена этих подпапок следующим образом: Parent_folder folder1 папка2 folder3 ...
09.07.2016
2
ответа

Когда GNU параллелен exit,my программе, также перестали работать

Я использую GNU, параллельный для выполнения функции удара. Функция просто содержит сценарий удара для перезапуска моей программы. Сначала, перезапуск в порядке, но когда параллель выходит, моя программа также перестала работать. Почему? #!/...
25.06.2015
2
ответа

Как скопировать файлы с других серверов, если локальная машина снижается

У меня есть сценарий, который будет работать в каждом сервере и копирует определенные файлы в него. Сценарий знает, куда я работаю и какие файлы я должен скопировать. Сценарий скопирует файлы с локального центра обработки данных...
02.04.2015
2
ответа

xargs, записи и стандартный вход

У меня есть разграниченный файл 0 байтов записей. Запишите 1, Строка 1 Рекордный 1, Строка 2 [нулевой байт] Рекордные 2, Строка 1 Рекордный 2, Строка 2, я хотел бы выполнить команду "process.sh" однажды для каждой записи, с...
23.10.2014
2
ответа

разделите файл, передайте каждую часть как параметрический усилитель к сценарию, запустите каждый скрипт параллельно

У меня есть words.txt с 10 000 слов (одно к строке). У меня есть 5 000 документов. Я хочу видеть, который документы содержат который из тех слов (с regex шаблоном вокруг слова). У меня есть script.sh это...
02.08.2014
1
ответ

Как использовать GNU Parallel для одновременного выполнения программы?

Мне нужно запустить скрипт Python несколько раз параллельно, но я выполнял его в фоновом режиме, как это ipython program.py & ipython program.py &... Я хочу знать, использует ли этот способ одно ядро ​​на выполнение или просто выполняет программу
02.12.2021
1
ответ

Как использовать sem для параллельного запуска команды оболочки в цикле for?

Для меня это ничего не ускоряет :домены = ()для i in `seq 1 100 `; делать эхо $i word= `sem "xidel -s ' https://www.thisworddoesnotexist.com/' -e '//div[@id="definition -word"]/text ()'" `len=${#слово} если [ "
05.11.2021
1
ответ

Можно ли заставить GNU Parallel выводить командную строку, выполняемую при запуске в построчном режиме?

Предположим, у меня есть список команд в файле cmd _file. Я запускаю эти команды через :cat cmd _файл | параллельный -k -I {} "{}" Одна из команд не работает. Все команды используют один и тот же инструмент CLI с разными входными данными. Прямо сейчас
07.10.2021
1
ответ

Как распараллелить рекурсивную функцию bash?

У меня есть функция bash, которая в основном скручивает конечную точку для набора ссылок и снова рекурсивно скручивает каждую из этих ссылок (для другого набора ссылок ). задача (){ ссылка = "$1" ответ=$ (curl "$ссылка" )#сохранить данные ответа в файл..
03.09.2021
1
ответ

Как я могу использовать базовое имя с параллельным?

У меня есть такие файлы в системе Linux :10S1 _S5 _L002 _chrm.fasta SRR3184711 _chrm.fasta SRR3987378 _chrm.fasta SRR4029368 _chrm. фаста SRR5204465 _хром.фаста SRR5997546 _хром.фаста...
10.06.2021
1
ответ

Как запустить сценарий ожидания параллельно, а не последовательно?

#!/bin/expect --set vm _num [lindex $argv 0] помещает " ``````````````````````````````````````````````````````````````" ставит "``````````````````````````````````````````````````````````````&...
05.06.2021
1
ответ

Запуск нескольких команд Gnuplot параллельно с Gnu Parallel

Я хочу запустить список команд Gnuplot параллельно. Я получаю сообщение об ошибке «Неизвестный параметр» :$./параллельный -сюжет -sine.sh | параллельный -q gnuplot нераспознанная опция -e"установить...
04.06.2021
1
ответ

gnu parallel -команда ускорения для удаленных серверов, которые ждут

Я использую gnu parallel для создания резервных копий примерно ~1500 веб-сайтов на pantheon.io, используя их конечный CLI. Команда создания резервной копии терминала :не завершается до тех пор, пока не будет получен ответ о том, что она...
14.04.2021
1
ответ

Использовать GNU Parallel, если файл содержит одну (длинную )строку

У меня есть файл, представляющий собой HTML-документ, содержащий , из которого я хочу извлечь данные и вывести их в формате csv. В этом файле 544609657 символов, около 545 мегабайт, все в одной строке....
31.03.2021
1
ответ

Как ограничить количество задач первыми аргументами в GNU Parallel?

Я хочу запустить серию параллельных заданий на основе набора аргументов, назначая второй аргумент. Я использую параметр ссылки --в GNU Parallel как параллельный --задания 3 --эхо-канал :::A B C :::D E F G А...
30.03.2021
1
ответ

Как использовать параллель с inotifywait?

Сейчас у меня это :inotifywait -m./input -e close _write | parallel --max -args 1 "echo {1}" По какой-то причине это вообще ничего не делает. Вывод inotifywait такой же, как...
22.02.2021
1
ответ

Использовать parallel для ускорения функции max рекурсивной оболочки?

Мне нужна была функция max, чтобы найти наибольшее значение в массиве (из 350 значений int ), и, будучи другом рекурсии, я попробовал рекурсивный подход :max (){ len=$ #a=$1 b=$2 case $len...
20.02.2021
1
ответ

параллельное сравнение двух аргументов и отправка в команду

Я пытаюсь выполнить команду recon -all с GNU parallel. Он должен принимать один аргумент в {1}, например :параллель --progress subj _id='echo {1} | cut -d / -f 3' && recon -all -s $subj _id -i {1} -sd...
07.02.2021
1
ответ

Прекращение работы GNU Parallel

GNU Parallel работал нормально, и вдруг всякий раз, когда я пытаюсь его использовать, я получаю это сообщение об ошибке, которое я получаю при выполнении любой параллельной команды :параллель :Этого не должно происходить. Вы нашли ошибку....
22.12.2020
1
ответ

параллельный :Предупреждение :Нет больше дескрипторов файлов

Я запускаю GNU parallel и через некоторое время получаю :parallel :Предупреждение :дескрипторов файлов больше нет. Может помочь повышение ulimit -n или etc/security/limits.conf. Какой аргумент уместно было бы добавить...
17.12.2020
1
ответ

Беспарольный SSH, список возможных паролей для проверки любого хоста

Итак, я знаю, что для включения SSH без пароля мне нужно сгенерировать общедоступный ключ аутентификации и добавить его в файл ключей удаленных хостов ~/.ssh/authorized _, создав новую пару ключей SSH. Вопрос в том...
09.12.2020
1
ответ

Параллельный bash GNU

Я изучаю параллель GNU, и мне интересно, имеет ли это смысл :bash :IFS=" " при чтении поля || [-n "$поле" ]; do targets _array+= ("$field" )done
02.12.2020