bash维护并行下载任务

发布时间：2020-12-15 07:07:16 所属栏目：安全来源：网络整理

导读：今天PHP站长网 52php.cn把收集自互联网的代码分享给大家，仅供参考。 cat urlfile|while read i;do #循环一个文件中下载链接while [ `jobs |wc -l` -eq 20 ] ;do #判断后台下载任务数量是否在20个，如果是则等待一段时间

以下代码由PHP站长网 52php.cn收集自互联网

现在PHP站长网小编把它分享给大家，仅供参考

cat urlfile|while read i;do   #循环一个文件中下载链接

while [ `jobs |wc -l` -eq 20 ] ;do  #判断后台下载任务数量是否在20个，如果是则等待一段时间，否就新增一个下载任务
  echo 'waitting...'
  sleep 1;
done
			
wget $i --timeout=20 & #启动一个下载任务

done

以上内容由PHP站长网【52php.cn】收集整理供大家参考研究

如果以上内容对您有帮助，欢迎收藏、点赞、推荐、分享。

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!