网络爬虫

以下代码由PHP站长网 52php.cn收集自互联网

现在PHP站长网小编把它分享给大家，仅供参考

# -*- coding: cp936 -*-
import WebCrawler
import time

url = input('设置入口url(例-->www.baidu.com): n')
thNumber = int(input('设置线程数:'))    #之前类型未转换出bug
Maxdepth = int(input('最大搜索深度：'))

start = time.clock()
url = 'http://' + url
wc = WebCrawler.WebCrawler(thNumber,Maxdepth)
wc.Craw(url)
end = time.clock()

print("The function run time is: %0.02f senconds.n" %(end - start))

以上内容由PHP站长网【52php.cn】收集整理供大家参考研究

如果以上内容对您有帮助，欢迎收藏、点赞、推荐、分享。

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!