您的位置:首页 > 编程语言 > Python开发

Python2 抓取百度贴吧图片

2016-06-13 16:01 309 查看
我这里抓取的百度贴吧的地址是http://tieba.baidu.com/p/2460150866?pn=1。以下是源码,使用的是python2。
import re            #导入正则模块
import urllib        #导入url库模块

#抓取页面的源码
def getHtml(url):
page = urllib.urlopen(url)       #打开指定的URL
html = page.read()               #读取URL的内容并保存
return html                      #函数返回读取的内容

#下载源码中指定的图片
def getImg(html):
reg = r'src="(.+?\.jpg)" pic_ext'
imgre = re.compile(reg)
imglist = imgre.findall(html)
x = 0
for imgurl in imglist:
print(imgurl)
#下载图片到指定的目录,并且重新命名
urllib.urlretrieve(imgurl,r'C:\Users\Water\PycharmProjects\test\image\%s-%s.jpg' % (i,x))
x = x + 1

#循环抓取所有的页面
i = 1
while i < 74:                #贴吧共有74页评论
html = getHtml("http://tieba.baidu.com/p/2460150866?pn=" + str(i))
getImg(html)
i+=1
print(i)


下面是抓取的结果


内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  python