ubuntu安装scrapy方法

时间:2022-10-13 20:55:30

sudo apt-get install python-dev   【默认安装python2】

sudo apt-get install python3-dev   【指定安装python3最新的】

【安装一下依赖】

sudo apt-get install build-essential
sudo apt-get install libxml2-dev
sudo apt-get install libxslt1-dev
sudo apt-get install python-setuptools

-----------------

接下来安装scrapy爬虫框架

sudo pip install -i http://pypi.douban.com/simple/  scrapy         【-i  后面是指定豆瓣源,这样安装的时候就会快不少】

pip  install  -i  https://pypi.doubanio.com/simple/  --trusted-host pypi.doubanio.com  scrapy

【豆瓣源地址记住,以后安装其他的时候都可以用的上】

【等待安装完就可以正常使用了】