Python爬虫框架Scrapy 学习笔记 10.1 -------【实战】 抓取天猫某网店所有宝贝详情
2015-01-11 21:19
1026 查看
第一部分：任务描述
起始页面：http://shanhuijj.tmall.com/search.htm?spm=a1z10.3-b.w4011-3112923129.1.KjGkS2
这个页面列出了网店的所有宝贝，如图：
点击进入宝贝详情页面，例如：http://detail.tmall.com/item.htm?spm=a1z10.3-b.w4011-3112923129.62.xGx75B&id=10910218037&rn=918f15e64b1131d19b6f0f9585ec0330&abbucket=1
目标数据：
1.商品名称(productName),2.价格区间(priceRange)
3.月销量(monthSale)4.累计评价(totalComment)5.收藏人数(popularity)6.成交记录(tradeRecord)：买家(buyer),型号(type),数量(amount),价格(price),成交时间(tradeTime)
起始页面：http://shanhuijj.tmall.com/search.htm?spm=a1z10.3-b.w4011-3112923129.1.KjGkS2
这个页面列出了网店的所有宝贝，如图：
点击进入宝贝详情页面，例如：http://detail.tmall.com/item.htm?spm=a1z10.3-b.w4011-3112923129.62.xGx75B&id=10910218037&rn=918f15e64b1131d19b6f0f9585ec0330&abbucket=1
目标数据：
1.商品名称(productName),2.价格区间(priceRange)
3.月销量(monthSale)4.累计评价(totalComment)5.收藏人数(popularity)6.成交记录(tradeRecord)：买家(buyer),型号(type),数量(amount),价格(price),成交时间(tradeTime)
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- Python爬虫框架Scrapy 学习笔记 10.2 -------【实战】 抓取天猫某网店所有宝贝详情
- Python爬虫框架Scrapy 学习笔记 10.3 -------【实战】 抓取天猫某网店所有宝贝详情
- Python爬虫框架Scrapy 学习笔记 10.2 -------【实战】 抓取天猫某网店所有宝贝详情
- python爬虫框架scrapy学习笔记
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第2章 windows下搭建开发环境
- Python爬虫框架Scrapy实战 - 抓取BOSS直聘招聘信息
- Python爬虫框架Scrapy实战之抓取户外数据
- Python爬虫框架Scrapy 学习笔记 5 ------- 使用pipelines过滤敏感词
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第5章 scrapy爬取知名问答网站（2）
- Python的Scrapy爬虫框架简单学习笔记
- 【极客学院】－python学习笔记-4-单线程爬虫 (提交表单抓取信息，实战练习)
- Python爬虫框架Scrapy实战之批量抓取招聘信息
- Python爬虫框架Scrapy 学习笔记 9 ----selenium
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第1章 课程介绍
- Python爬虫框架Scrapy 学习笔记 1 ----- 环境搭建
- python爬虫框架scrapy学习笔记
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第4章 scrapy爬取知名技术文章网站（1）
- Python爬虫框架Scrapy 学习笔记 4 ------- 第二个Scrapy项目
- Python爬虫框架Scrapy实战 - 抓取BOSS直聘招聘信息
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第5章 scrapy爬取知名问答网站（1）