cmd命令创建python scrapy 项目
2017-09-05 00:00
447 查看
scrapy startproject xxx 在当前目录创建以xxx名字的工程
目录结构如下,解释:
scrapy.cfg: 项目配置文件
xxx/: 项目python模块, 呆会代码将从这里导入
xxx/items.py: 项目items文件
xxx/pipelines.py: 项目管道文件
xxx/settings.py: 项目配置文件
xxx/spiders: 放置spider的目录
scrapy genspider name domain 创建一个spider
#如:
#scrapy genspider sohu sohu.org
scrapy list 查看当前项目有多少个爬虫
scrapy view url 使用浏览器打开网页
scrapy shell url shell命令 进入scrapy 交互环境
scrapy runspider 爬虫名 直接运行创建的爬虫,不会运行整个项目
目录结构如下,解释:
scrapy.cfg: 项目配置文件
xxx/: 项目python模块, 呆会代码将从这里导入
xxx/items.py: 项目items文件
xxx/pipelines.py: 项目管道文件
xxx/settings.py: 项目配置文件
xxx/spiders: 放置spider的目录
scrapy genspider name domain 创建一个spider
#如:
#scrapy genspider sohu sohu.org
scrapy list 查看当前项目有多少个爬虫
scrapy view url 使用浏览器打开网页
scrapy shell url shell命令 进入scrapy 交互环境
scrapy runspider 爬虫名 直接运行创建的爬虫,不会运行整个项目
相关文章推荐
- Python scrapy创建项目出现错误—SyntaxError: invalid syntax
- Python-Scrapy创建第一个项目
- 利用scrapy创建初始Python爬虫项目
- 【python】pycharm 如何快速创建scrapy项目
- python爬虫 scrapy1-安装及创建第一个项目
- 16Python爬虫---Scrapy目录结构以及项目创建
- 创建Scrapy项目,Ubuntu 16.04 Python3.5 pip3
- Python3 大型网络爬虫实战 002 --- scrapy 爬虫项目的创建及爬虫的创建 --- 实例:爬取百度标题和CSDN博客
- 【实战\聚焦Python分布式爬虫必学框架Scrapy 打造搜索引擎项目笔记】第1章 课程介绍
- 用 python 创建 cocos2dx 项目工程
- 【python】Django项目的创建示例
- Python入门(一)——环境的搭建,创建第一个Python项目:Hello World
- python开源项目Scrapy抓取文件乱码解决
- Scrapy创建爬虫项目
- python2与python3同时存在的情况下创建Django项目
- Django创建python项目
- Python 创建Django项目
- cocos2dx-3.0 python创建项目报错
- python下的web开发框架-Django,创建项目
- Scrapy创建爬虫项目步骤