linux – Wget在重定向后不会递归下载

发布时间：2020-12-14 01:28:16 所属栏目：Linux 来源：网络整理

导读：这是我使用wget的方式： wget --recursive --level=10 --convert-links btlregion.ru 页面http://btlregion.ru/重定向到http://www.btlregion.ru/.当我像上面那样运行wget时,它遵循重定向,但只下载该页面 – 而不是所有页面递归. 我已经尝试过–max-redirect

这是我使用wget的方式：

wget --recursive --level=10 --convert-links btlregion.ru

页面http://btlregion.ru/重定向到http://www.btlregion.ru/.当我像上面那样运行wget时,它遵循重定向,但只下载该页面 – 而不是所有页面递归.

我已经尝试过–max-redirects = 1和–domains = www.btlregion.ru但它不起作用.

如果我在http://www.btlregion.ru/直接调用wget,则递归下载有效.

解决方法

您需要将–span-hosts(-H)与–domains一起使用：

wget --recursive --level=10 --convert-links -H 
--domains=www.btlregion.ru btlregion.ru

–span-hosts允许wget跟随指向其他域的链接,并且 – 域限制此操作仅遵循指向所列域的链接,以避免下载Internet.

选项–domains,有点与直觉相反,只能与-H一起使用.这在文档中提到,但是以一种难以理解的方式.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!