大数据爬虫基础（三）Scrapy在Windows 10下的安装

环境：

Windows 10 x64

Anaconda python 2.7.12

1、依赖包的安装

Scrapy依赖项的安装

Scrapy的依赖项可以在这里进行下载：http://pan.baidu.com/s/13oRlq（已失效，需要可以联系本人）

安装lxml-3.2.4.win-amd64-py2.7.exe

安装pywin32-218.win-amd64-py2.7.exe

安装Twisted-13.2.0.win-amd64-py2.7.exe

安装pyOpenSSL-0.13.1.win-amd64-py2.7.exe

安装zope.interface-4.0.5.win-amd64-py2.7.exe

验证scrapy依赖项是否安装成功的方法：

cmd执行$ python进入python控制台

执行import lxml，如果没报错，则说明lxml安装成功

执行import twisted，如果没报错，则说明twisted安装成功

执行import OpenSSL，如果没报错，则说明OpenSSL安装成功

执行import zope.interface，如果没报错，则说明zope.interface安装成功

如果安装成功，那么在cmd中执行& python，然后执行import lxml，如果没有报错，则说明lxml安装成功。

2、Scrapy安装

可以 pip install Scrapy 或者 conda install -c scrapinghub scrapy 或者

安装Scrapy

方法1： 控制台输入：easy_install scrapy（下载较慢，如果失败可以多试几次或使用方法2）

方法2：解压缩Scrapy-0.22.2.tar.gz，在其目录下执行$ python setup.py install进行Scrapy的安装。

检查Scrapy是否安装成功的方法：可以在cmd控制台执行 $ scrapy ，如果没有报错，说明安装成功。