bash – 带输入文件和输出文件的Wget

发布时间：2020-12-15 22:05:28 所属栏目：安全来源：网络整理

导读：我有一个URL列表,我想使用–input-file提供给wget. 但是我无法弄清楚如何同时控制–output-document值, 如果您逐个发出命令,这很简单. 我想将每个文档保存为其URL的MD5. cat url-list.txt | xargs -P 4 wget xargs就在那里因为我也想利用max-procs功能进行并

我有一个URL列表,我想使用–input-file提供给wget.

但是我无法弄清楚如何同时控制–output-document值,
如果您逐个发出命令,这很简单.
我想将每个文档保存为其URL的MD5.

cat url-list.txt | xargs -P 4 wget

xargs就在那里因为我也想利用max-procs功能进行并行下载.

解决方法

如何使用循环？

while read -r line
do
   md5=$(echo "$line"|md5sum)
   wget ... $line ... --output-document $md5 ......
done < url-list.txt

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!