您的位置:首页 > 编程语言 > Python开发

python爬虫scrapy框架灵巧使用

2017-08-17 14:27 661 查看
(1)下面代码意义在于可以执行main.py文件运行程序,当然我们也可以在shell中运行scrapy crawl name

from scrapy import cmdline
cmdline.execute("scrapy crawl name".split())


(2)在文件头添加from scrapy import Field,后面的Field前就不用再添加scrapy,目的是为了提高效率

from scrapy import Item, Field

class DoubanmovieItem(Item):
# define the fields for your item here like:
# name = scrapy.Field()
title = Field()
movieInfo = Field()
star = Field()
quote = Field()
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: