由于是初学者，业余学习，习惯使用windows，了解到scrapy用户很多。当然scrapy安装过程坑很多，主要是Twisted这个大坑。
最近发现已经有第三方处理的Twisted包了，只需要下载和你的python对应版本的whl安装即可，比如你是用python3.5.x的，那么你要下载名字带cp35的whl文件，建议下载32位版的，最好不要32位和64位混用，以免出现不必要问题
Twisted和lxml等第三方包可以在这里下载
http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
- 安装twisted，先下载Twisted-xx.whl（比如Twisted-16.4.1-cp35-cp35m-win32.whl），然后切换到下载目录，用pip安装，命令pip install Twisted-xx.whl（Twisted-xx.whl改为 实际文件名）
- pip install scrapy。如果遇到提示缺少依赖包，请到这里找 http://www.lfd.uci.edu/~gohlke/pythonlibs/，然后pip install xx.whl （xx.whl改为实际文件名），然后重试。
- 完成后，对照官方手册可以开始学习。
中文版（scrapy 0.25） http://scrapy-chs.readthedocs.io/zh_CN/latest/
英文版（最新版） http://doc.scrapy.org/en/latest/
来源：https://www.cnblogs.com/pyspider/p/5890567.html