文件名称:Scrapy爬虫框架教程(二)-- 爬取豆瓣电影TOP250
文件大小:6KB
文件格式:ZIP
更新时间:2021-03-03 16:00:39
Scrapy
经过上一篇教程我们已经大致了解了Scrapy的基本情况,并写了一个简单的小demo。这次我会以爬取豆瓣电影TOP250为例进一步为大家讲解一个完整爬虫的流程。 工具和环境 语言:python 2.7 IDE: Pycharm 浏览器:Chrome 爬虫框架:Scrapy 1.2.1 https://zhuanlan.zhihu.com/p/24769534?refer=woodenrobot
【文件预览】:
scrapy-tutorial-master
----.gitignore(17B)
----scrapyspider()
--------run.py(205B)
--------spiders()
--------__init__.py(0B)
--------pipelines.py(292B)
--------settings.py(3KB)
--------items.py(386B)
----scrapy.cfg(268B)