您的位置:首页 > 编程语言 > Python开发

【求教】如何使用python爬取到高清原图?

2018-02-12 11:00 337 查看
python3爬取自己上传到豆瓣个人相册里的图片(每张2M,960x720),但是爬取下来的只有20kb,540x405,分析https://www.douban.com/photos/album/1657891127/这一网址(步骤:审查元素-->network -->img)发现里边图片大小就是540x405,点进具体图片,网址为https://www.douban.com/photos/photo/2512758368/#image,但是分析网页发现有五张图片,但其中只有三张是960x720,另外两张只是缩略图,所以问题来了,我该如何才能找到含有五张960x720原图的网址,进而下载到我需要的原图呢?求大神帮忙!以下是我的代码:
#模块导入
from urllib.request import urlopen
from bs4 import BeautifulSoup
import requests

#URL及图片地址获取
URL =  "https://www.douban.com/photos/album/1657891127/"
html = requests.get(URL).text
soup = BeautifulSoup(html, "html.parser")
img_div = soup.find_all('div', {"class": "photolst clearfix"})

#建立文件

import os
os.makedirs('./img/', exist_ok=True)
#获取图片并下载
for div in img_div:
    imgs = div.find_all('img')
    image_name = 0
    for img in imgs:
        url = img['src']
        r = requests.get(url, stream=True)
        with open('./img/%s' % str(image_name)+'.png', 'wb') as f:
            image_name += 1
            for chunk in r.iter_content(chunk_size=128):
                f.write(chunk)

内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  python 原图爬取