python基于BeautifulSoup实现抓取网页指定内容的方法

发布时间：2020-12-16 22:10:24 所属栏目：Python 来源：网络整理

导读：本篇章节讲解python基于BeautifulSoup实现抓取网页指定内容的方法。供大家参考研究。具体实现方法如下： # _*_ coding:utf-8 _*_#xiaohei.python.SEO.call.me:)#win+python2.7.ximport urllib2from bs4 import BeautifulSoupdef jd(url): page = url

本篇章节讲解python基于BeautifulSoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下：

# _*_ coding:utf-8 _*_
#xiaohei.python.SEO.call.me:)
#win+python2.7.x
import urllib2
from bs4 import BeautifulSoup
def jd(url):
  page = urllib2.urlopen(url)
  html_doc = page.read()
  soup = BeautifulSoup(html_doc.decode('gb2312','ignore'))
  for i in soup.find_all('div',id="sortlist"):
    one = i.find_all('a')
    two = i.find_all('li')
    print ("%s %s" % (one,two))
jd("http://channel.jd.com/computer.html")

希望本文所述对大家的Python程序设计有所帮助。

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!