爬取指定页面链连

以下代码由PHP站长网 52php.cn收集自互联网

现在PHP站长网小编把它分享给大家，仅供参考

require 'rubygems'
require 'open-uri'


url_hash = {}

open('http://www.cnblogs.com/TomXu/archive/2011/12/15/2288411.html').each do |i|
  if i =~ /(http://www.cnblogs.com/TomXu/archive.*.html).*(.*">.*</a)/
    url_hash[$1] = $2[2..-4]
  end
end

url_hash.each do |k,v|
  # puts k 
  # puts v
  # puts "**********************"
  `wget #{k} -O #{v}.html`
end

以上内容由PHP站长网【52php.cn】收集整理供大家参考研究

如果以上内容对您有帮助，欢迎收藏、点赞、推荐、分享。

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!