python基于beautifulsoup实现抓取网页指定内容的方法

本文实例讲述了python基于beautifulsoup实现抓取网页指定内容的方法。分享给大家供大家参考。具体实现方法如下:

# _*_ coding:utf-8 _*_
#xiaohei.python.seo.call.me:)
#win+python2.7.x
import urllib2
from bs4 import beautifulsoup
def jd(url):
page = urllib2.urlopen(url)
html_doc = page.read()
soup = beautifulsoup(html_doc.decode(‘gb2312′,’ignore’))
for i in soup.find_all(‘p’, ):
one = i.find_all(‘a’)
two = i.find_all(‘li’)
print (“%s %s” % (one,two))
jd(“http://channel.jd.com/computer.html”)

希望本文所述对大家的python程序设计有所帮助。

Posted in 未分类

发表评论