python3.6安装pyspider

时间:2023-03-09 00:05:11
python3.6安装pyspider

win10下安装pyspider

1、pip

我在安装pip的时候默认安装了Pip.

如果没有的话:pip安装

2、PhantomJS

PhantomJS 是一个基于 WebKit 的服务器端 JavaScript API。它全面支持web而不需浏览器支持,其快速、原生支持各种Web标准:DOM 处理、CSS 选择器、JSON、Canvas 和 SVG。 PhantomJS 可以用于页面自动化、网络监测、网页截屏以及*面测试等。

PhantomJS安装

3、Pyspider

直接利用pip安装

pip install pyspider

我在安装pyspider时遇到“Please specify --curl-dir=/path/to/built/libcurl ”的错误提示,折腾了很久才明白缺pycurl,在这个网站http://www.lfd.uci.edu/~gohlke/pythonlibs/下载安装。(很多直接安装不好使的扩展可以在这里下载)

安装.whl格式需要先安装wheel

pip install wheel

之后就可以直接安装了:

pip install pycurl-7.43.0-cp36-cp36m-win_amd64.whl

pyspider安装完成后再命令行输入:pyspider   如下效果

python3.6安装pyspider

然后浏览器访问 http://localhost:5000

观察一下效果,如果可以正常出现 PySpider 的页面,那证明一切OK

python3.6安装pyspider