Python环境配置之Scrapy安装

时间:2021-08-24 09:34:18

1.最近因为在学习爬虫,有需要用到Scrapy框架。安装过程中出了点问题,但好在经过一段时间的折腾,找到了解决方法,就在这里mark一下,以供以后参考。
2.刚开始在命令行中conda install scrapy (电脑上的IDE是Anaconda)和 pip install scrapy,都提示有需要更新scrapy所依赖的python、openssl、lxml等包,但在更新之后提示“Microsoft Visual C++ 9.0 is required”。上网一查,是python2.7需要VS2008的支持,但我电脑上的VS已经升级为VS2015,并不支持python2.7。之前在入门的时候,由于很多经典的python书和案例都是以python2.7为基础的,所以同时安装了python2.7和python3.5。但近来各种资源越来越多地开始支持python3了,遂放弃python2.7。然后在python3环境再次执行pip install scrapy ,顺利安装完毕。
下面是安装Scrapy时所需要更新的软件包清单:

Python环境配置之Scrapy安装

Python环境配置之Scrapy安装

Python环境配置之Scrapy安装