汽车之家爬虫

时间:2021-04-16 05:58:25
【文件属性】:

文件名称:汽车之家爬虫

文件大小:34KB

文件格式:ZIP

更新时间:2021-04-16 05:58:25

汽车之家

汽车之家车型参数口碑及论坛爬虫 整合参考了一些git上的其他爬虫,汽车之家板块改版比较多,另外会有js混淆,比较麻烦。只保存成txt,后续用java处理的。不过格式都比较清晰


【文件预览】:
autohome_crawler-master
----autohome_club()
--------settings.py(3KB)
--------pipelines.py(955B)
--------run.py(323B)
--------scrapy.cfg(270B)
--------__init__.py(79B)
--------bbsjs_example.txt(35KB)
--------items.py(728B)
--------spiders()
--------middlewares()
----series_config()
--------murl.txt(7KB)
--------koubei_spider.py(4KB)
--------__init__.py(79B)
--------config_spider.py(781B)
----.idea()
--------misc.xml(213B)
--------autohome_crawler.iml(398B)
--------workspace.xml(27KB)
--------inspectionProfiles()
--------modules.xml(284B)
----README.md(310B)

网友评论

  • 一般般,我自己整合了一个