在Perl中使用JavaScript支持的Web Crawler？

发布时间：2020-12-15 21:16:06 所属栏目：大数据来源：网络整理

导读：我想编写一个perl应用程序,它会抓取一些网站并从这些网页收集图像和链接.因为大多数页面都使用生成HTML内容的JavaScript,所以我需要使用JavaScript支持编码客户端浏览器,以便能够解析由JavaScript生成和/或修改的最终HTML代码.我有什么选择？如果可能,请发

我想编写一个perl应用程序,它会抓取一些网站并从这些网页收集图像和链接.因为大多数页面都使用生成HTML内容的JavaScript,所以我需要使用JavaScript支持编码客户端浏览器,以便能够解析由JavaScript生成和/或修改的最终HTML代码.我有什么选择？

如果可能,请发布一些实现代码或链接到一些示例.

解决方法

有几种选择.

在Windows上> Win32::IE::Mechanize
> Mozilla::Mechanize
> WWW::Mechanize::Firefox
> WWW::Selenium
> Wight

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!