1.最近因为在学习爬虫,有需要用到Scrapy框架。安装过程中出了点问题,但好在经过一段时间的折腾,找到了解决方法,就在这里mark一下,以供以后参考。
2.刚开始在命令行中conda install scrapy (电脑上的IDE是Anaconda)和 pip install scrapy,都提示有需要更新scrapy所依赖的python、openssl、lxml等包,但在更新之后提示“Microsoft Visual C++ 9.0 is required”。上网一查,是python2.7需要VS2008的支持,但我电脑上的VS已经升级为VS2015,并不支持python2.7。之前在入门的时候,由于很多经典的python书和案例都是以python2.7为基础的,所以同时安装了python2.7和python3.5。但近来各种资源越来越多地开始支持python3了,遂放弃python2.7。然后在python3环境再次执行pip install scrapy ,顺利安装完毕。
下面是安装Scrapy时所需要更新的软件包清单:
相关文章
- python爬虫入门(八)Scrapy框架之CrawlSpider类
- python 安装scrapy need vistual c++ 14.0 的正面解法
- 如何在scrapy python中使用多个请求并在它们之间传递项目
- python之scrapy的FormRequest模拟POST表单自动登陆
- Python爬虫之Scrapy框架系列(3)——项目实战【某瓣top250电影信息获取】
- windows下《Go Web编程》之Go环境配置和安装
- selenium+python自动化之环境安装
- Python学习系列之(二)图解Windows8.1下安装Django
- python爬虫框架—Scrapy安装及创建项目
- Yeoman入门之安装及环境配置