PyCharm下使用Scrapy建立爬虫项目--MyFirstSpiderObject

• 首先下载并安装Anaconda3以及PyCharm 

　　Anaconda3选中添加环境变量，如果忘记选中可以手动在path中添加如下环境变量

　

 

• 建文件夹scrapy

　　

• 安装scrapy 

　　cmd进入对应目录，执行pip install scrapy。

　　

　　检查版本 scrapy -v

　　

• 创建scrapy项目

　　如下图显示创建成功

　　

• PyCharm导入项目

　　

　　

spider创建成功！

pycharm的termina中输入：

scrapy genspider BiduSpider http://www.baidu.com

生成模板

 

来源：oschina

链接：https://my.oschina.net/u/4311024/blog/3643273