文件名称:Python-Scrapy项目mysqlmongodb豆瓣top250电影
文件大小:29KB
文件格式:ZIP
更新时间:2022-08-30 01:17:27
Python开发-Web爬虫
学习python时,爬虫是一种简单上手的方式,应该也是一个必经阶段。本项目用Scrapy框架实现了抓取豆瓣top250电影,并将图片及其它信息保存下来。爬取豆瓣top250电影不需要登录、没有JS解析、而且只有10页内容,用来练手,太合适不过了。
【文件预览】:
ScrapyProject-master
----main.py(127B)
----LICENSE(34KB)
----.gitignore(1KB)
----README.md(11KB)
----firsttest()
--------middlewares.py(473B)
--------pipelines.py(4KB)
--------spiders()
--------items.py(580B)
--------settings.py(2KB)
--------user_agents.py(7KB)
----README_FIRSTTEST.md(11KB)