python 3.6.1 安装scrapy踩坑之旅

时间:2024-12-04 11:34:02

系统环境:win10 64位系统安装

python基础环境配置不做过多的介绍

window环境安装scrapy需要依赖pywin32,下载对应python版本的exe文件执行安装,下载的pywin32版本不对安装会失败

下载依赖地址:https://sourceforge.net/projects/pywin32/files/pywin32/Build%20221/

下载依赖安装完成后试下pip install scrapy,很显然失败了

python 3.6.1 安装scrapy踩坑之旅

发现网友的解决方案:

地址:https://blog.****.net/aviciie/article/details/80768328

安装scrapy还需要的依赖库有这些:Twisted ,lxml ,pyOpenSSL,wheel

我的电脑上直接pip install Twisted 也不好使,

https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted下载后,本地安装(在对应Twisted文件目录下用pip install 完整名称加后缀.whl的Twisted文件)即可

安装完成依赖后再次尝试pip install scrapy

(win7 64位系统尝试有遇到需要安装vc++依赖库,建议参考解决方案:https://blog.****.net/rock4you/article/details/52689043)

到python交互下 测试import scrapy无报错very nice,完美安装成功

当然还会有其他异常情况,新手的话建议用anaconda集成环境

这个是清华的镜像站地址:https://mirror.tuna.tsinghua.edu.cn/help/anaconda/

网易的镜像站下载地址:http://mirrors.163.com/

全球镜像站:  https://www.debian.org/mirror/list