在bash中的并行进程之间添加等待

Question

我有一个bash脚本来上传数据到一个站点。我的上传速度很慢，所以我开始同时运行它，同时使用xargs和-N1。

但是，问题是服务器问我解决一个验证码，如果我一次运行5，而它一次正常工作1。

我想这是因为所有的进程都是在同一时间开始的，我正在被标记。

无论如何，这里的问题是，有没有什么办法让我在xargs/gnu parallel中的启动进程之间添加等待（比如说1秒）？

我唯一能想到的就是使用pgrep脚本| wc -1来计算脚本实例，然后休眠几秒钟。

但是，这真的不是最佳的，有没有更好的方法来做到这一点？

Answer 1

如果上传需要一个随机的时间量，需要第一个5以1-5秒的延迟开始：

cat list | parallel -j5 [ {#} -lt 6 ] \&\& sleep {#}\; upload {} 

Answer 2

可以使用

read -p "Press [Enter] key to continue..". 

现在你可以决定每一个过程后暂停脚本执行，在你自己的意愿何时开始下一道工序..

我同意这涉及到人工干预。但是，由于在这个特殊情况下只有5个进程需要启动，所以它应该可以正常工作。

编辑：作为read停止自动化您可以使用

sleep 5 

其中LL睡眠5秒。

Answer 3

而不是使用xargs的，我觉得你只是想要一个循环，在

for i in {1..5}; do sleep 5; your-command & done 

这个叉关闭每5秒的命令。为了增大延迟（如果那是需要）：

for i in {1..5}; do ((w=i*5)); sleep $w; your-command & done 

另一种选择：

files="a.txt b.txt c.txt" 
for i in $files; do upload-command $i& sleep 5; done 

Answer 4

这可能会为你工作（使用GNU平行）：

find . -type f -name "*.txt" -print | parallel 'script {} & sleep 1' 

这里有一个终端会话表现示例运行：

for x in {a..c};do for y in {1..3};do echo $x >>$x;done;done 
ls 
a b c 
cat a 
a 
a 
a 
cat /tmp/job 
#!/bin/bash 
sed -i -e '1e date' -e 's/./\U&/' $1 
sleep 5 
sed -i '${p;s,.*,date,e}' $1 
find . -type f -name "?" -print | parallel '/tmp/job {} & sleep 1' 
cat ? 
Sat Mar 10 20:25:10 GMT-1 2012 
A 
A 
A 
Sat Mar 10 20:25:15 GMT-1 2012 
Sat Mar 10 20:25:09 GMT-1 2012 
B 
B 
B 
Sat Mar 10 20:25:14 GMT-1 2012 
Sat Mar 10 20:25:08 GMT-1 2012 
C 
C 
C 
Sat Mar 10 20:25:13 GMT-1 2012 

正如你可以看到每个作业都开始了第二个分开的文件c开始于08在13完成，文件b 09到14和文件10到15.