文件名称:scrapy分页及详情页数据爬取
文件大小:346KB
文件格式:ZIP
更新时间:2023-03-22 10:54:45
scrapy 详情页
该程序爬取主页以及详情页的数据,保存至日志中,并自动爬至最后一页 爬取51job的主页信息记忆详情页信息
【文件预览】:
51job
----log20191228.log(2.08MB)
----scrapy.cfg(253B)
----51job()
--------settings.py(3KB)
--------pipelines.py(289B)
--------middlewares.py(4KB)
--------__init__.py(0B)
--------items.py(288B)
--------__pycache__()
--------spiders()