我知道可以通过以下方式做到这一点,为了说明,我假设工作的数量是6:
./j1 &./j2 &./j3 &wait./j4 &./j5 &./j6 &wait
但是,通过这种方式,例如,如果j2运行j1和j3需要更长的时间,那么,我将只会遇到一个运行很长时间的后台作业.
替代方案(这就是我想要的)是每当一个作业完成时,bash应该开始队列中的下一个作业,以便在任何给定时间保持3个作业的速率.是否可以编写一个bash脚本来实现这个替代方案,可能使用循环?请注意,我需要运行更多的工作,我希望这种替代方法能为我节省大量时间.
这是我的脚本草稿,我希望你可以帮助我验证它的正确性并改进它,因为我是bash脚本的新手.此脚本中的想法是从here,here和here获取和修改的:
for i in $(seq 6)do # wait here if the number of jobs is 3 (or more) while (( (( $(jobs -p | wc -l) )) >= 3 )) do sleep 5 # check again after 5 seconds done jobs -x ./j$i &donewait
恕我直言,我认为这个脚本做了所需的行为.但是,我需要知道 – 来自bash专家 – 如果我做错了什么或者是否有更好的方法来实现这个想法.
非常感谢你.
解决方法 使用GNU xargs:printf '%smax_jobs=3; cur_jobs=0for ((i=0; i<6; i++)); do # If true,wait until the next background job finishes to continue. ((cur_jobs >= max_jobs)) && wait -n # Increment the current number of jobs running. ./j"$i" & ((++cur_jobs))donewait' j{1..6} | xargs -0 -n1 -P3 sh -c './""' _
使用bash(4.x)内置:
max_jobs=3declare -A cur_jobs=( ) # build an associative array w/ PIDs of jobs we startedfor ((i=0; i<6; i++)); do if (( ${#cur_jobs[@]} >= max_jobs )); then wait -n # wait for at least one job to exit # ...and then remove any jobs that aren't running from the table for pID in "${!cur_jobs[@]}"; do kill -0 "$pID" 2>/dev/null && unset cur_jobs[$pID] done fi ./j"$i" & cur_jobs[$!]=1donewait
请注意,依赖于内置函数的方法有一些极端情况 – 如果您有多个作业在同一时间退出,则单个等待-n可以获得其中几个,从而有效地消耗多个插槽.如果我们想要更强大,我们最终可能会得到以下内容:
……这显然是很多工作,但仍然有一个小的种族.考虑使用xargs -P代替. 总结
以上是内存溢出为你收集整理的linux – bash脚本在后台运行一定数量的作业全部内容,希望文章能够帮你解决linux – bash脚本在后台运行一定数量的作业所遇到的程序开发问题。
如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)