Python批量获取京东商品列表信息
2016-08-05 12:29
615 查看
今天在逛网站的时候无意间发现一个京东获取单个商品价格接口:
于是我就从Google上找了利用此接口批量获取价格信息的源码,稍作修改使其支持Python3(PS:通过这段代码,我对Python的易用性不再怀疑了,23333)
效果:
安利一下个人博客:https://cxfer.cn/2016/75.html
于是我就从Google上找了利用此接口批量获取价格信息的源码,稍作修改使其支持Python3(PS:通过这段代码,我对Python的易用性不再怀疑了,23333)
#!/usr/bin/env python # -*- coding: utf-8 -*- import requests from bs4 import BeautifulSoup url = 'http://list.jd.com/list.html?cat=9987,653,655&page=1&delivery=1&trans=1&JL=4_21_0' request = requests.get(url) soup = BeautifulSoup(request.text, "html.parser") items = soup.select('li.gl-item') i = 1 for item in items: sku = item.find('div')['data-sku'] price_url = 'http://p.3.cn/prices/mgets?skuIds=J_' + str(sku) price = requests.get(price_url).json()[0]['p'] name = item.find('div', class_="p-name").find('em').string item_url = 'http:' + item.find('div', class_="p-name").find('a')['href'] commit = item.find('div', class_="p-commit").find('a').string print("%d、\n 名称: %s \n 价格: %s 元 \n 评价: %s 个 \n 链接: %s" % (i, name, price, commit, item_url)) if i >= 10: break else: i += 1
效果:
安利一下个人博客:https://cxfer.cn/2016/75.html
相关文章推荐
- Python批量获取京东商品列表信息
- python爬虫(7)——获取京东商品评论信息
- Python爬虫框架Scrapy实战教程---定向批量获取职位招聘信息
- python实现批量获取指定文件夹下的所有文件的厂商信息
- Python爬虫实战(2):爬取京东商品列表
- python+微博API获取我的粉丝列表和关注列表信息(只能得到最新的30%)
- Selenium入门(三)如何获取京东的商品列表
- 微信批量获取关注者信息列表php版本
- 如何从京东商品里获取需要的信息
- Python爬虫实战(2):爬取京东商品列表
- python实现批量获取指定文件夹下的所有文件的厂商信息
- Python爬虫框架Scrapy实战之定向批量获取职位招聘信息
- Python爬虫框架Scrapy实战之定向批量获取职位招聘信息
- [Python] (多线程版本)抓取聚划算页面商品分析页面获取商品信息并以XML格式保存到本地
- python根据京东商品url获取产品价格
- python批量获取apk软件详细信息的实现
- python学习四:import模块方法、可变参数、字典key判断、版本信息获取、列表解析、
- python获取本人关注列表并批量存入本地mysql数据库
- Python+Selenium+Chrome抓取京东商品信息
- Python爬虫实战(2):爬取京东商品列表