Python读取网页内容的方法
发布时间:2020-12-16 21:44:35 所属栏目:Python 来源:网络整理
导读:本篇章节讲解Python读取网页内容的方法。供大家参考研究。具体如下: import urllib2#encoding = utf-8class Crawler: def main(self): #req = urllib2.Request('http://www.baidu.com/') #req.add_header('User-Agent','Mozilla/5.0 (Macintosh; In
本篇章节讲解Python读取网页内容的方法。分享给大家供大家参考。具体如下: import urllib2 #encoding = utf-8 class Crawler: def main(self): #req = urllib2.Request('http://www.baidu.com/') #req.add_header('User-Agent','Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:5.0)') #urllib2.socket.setdefaulttimeout(10) # 超时10秒 #page = urllib2.urlopen(req) page = urllib2.urlopen('http://www.google.com',timeout=10) data = page.read() print data print len(data) #计算字节长度 if __name__ == '__main__': me=Crawler() me.main() 希望本文所述对大家的Python程序设计有所帮助。 (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |