Python-Scrapy项目mysqlmongodb豆瓣top250电影

时间:2022-08-30 01:17:27
【文件属性】:

文件名称:Python-Scrapy项目mysqlmongodb豆瓣top250电影

文件大小:29KB

文件格式:ZIP

更新时间:2022-08-30 01:17:27

Python开发-Web爬虫

学习python时,爬虫是一种简单上手的方式,应该也是一个必经阶段。本项目用Scrapy框架实现了抓取豆瓣top250电影,并将图片及其它信息保存下来。爬取豆瓣top250电影不需要登录、没有JS解析、而且只有10页内容,用来练手,太合适不过了。


【文件预览】:
ScrapyProject-master
----main.py(127B)
----LICENSE(34KB)
----.gitignore(1KB)
----README.md(11KB)
----firsttest()
--------middlewares.py(473B)
--------pipelines.py(4KB)
--------spiders()
--------items.py(580B)
--------settings.py(2KB)
--------user_agents.py(7KB)
----README_FIRSTTEST.md(11KB)

网友评论