Python爬虫云服务器搭建系列之一:环境搭建

时间:2021-07-30 13:04:15

简介

本文所用到的云服务器是阿里云:Ubuntu 16.04 64位


0x00:创建实例并启动服务器

本节跳过


0x01:登陆服务器

工具:putty
安装putty后输入ipport(默认22),连接类型选择SSH(默认),保存save session,下次直接进入。
完了后点击open
Python爬虫云服务器搭建系列之一:环境搭建
输入账号密码:
Python爬虫云服务器搭建系列之一:环境搭建
账号默认为root,密码可以到网页端ecs实例-更多-重置密码,然后重启实例:
Python爬虫云服务器搭建系列之一:环境搭建
Python爬虫云服务器搭建系列之一:环境搭建


0x02:安装爬虫组件

  1. sudo apt-get update,首次进入,update一下,以后根据需要再update;
  2. pip install scrapy,Ubuntu16.04预装Python 3.5.3和Python 2.7,即使用的是Python 3,还是用pip安装,pip3会有问题;
  3. 其它组件就先略过,根据需要再安装。

0x03:上传Scrapy爬虫项目

工具:FileZilla
安装后打开软件,依次输入主机HOST、用户名、密码、端口号,点击快速连接。
Python爬虫云服务器搭建系列之一:环境搭建
将项目文件夹上传到对应的目录:
Python爬虫云服务器搭建系列之一:环境搭建


0x04:执行爬虫项目

  1. 到putty客户端cd scrapyprojects/jdcomment
  2. Run:Python3 main.py
    Python爬虫云服务器搭建系列之一:环境搭建

以上。