scrapy分页及详情页数据爬取

时间:2023-03-22 10:54:45
【文件属性】:

文件名称:scrapy分页及详情页数据爬取

文件大小:346KB

文件格式:ZIP

更新时间:2023-03-22 10:54:45

scrapy 详情页

该程序爬取主页以及详情页的数据,保存至日志中,并自动爬至最后一页 爬取51job的主页信息记忆详情页信息


【文件预览】:
51job
----log20191228.log(2.08MB)
----scrapy.cfg(253B)
----51job()
--------settings.py(3KB)
--------pipelines.py(289B)
--------middlewares.py(4KB)
--------__init__.py(0B)
--------items.py(288B)
--------__pycache__()
--------spiders()

网友评论