文件名称:comebebesp:刮一张圣保罗餐厅的清单
文件大小:8KB
文件格式:ZIP
更新时间:2024-06-24 02:14:41
Python
ComeBebeSP 该项目的目标是圣保罗餐厅,由合作伙伴非*组织进行食物收集工作。 当然,它对任何其他项目都有用。 将考虑对更多站点的请求,请打开一个问题。 安装和运行 Scrapy 该项目使用预发布的 Scrapy 1.0 Release Candidate。 在 Python 开发环境中安装它(根据使用 lxml、libxslt 和 libssl)应该很容易从这个项目的检出: pip install -r requirements.txt 它还需要scrapylib和purl ,在requirements.txt声明。 运行爬虫 从项目的检出,运行: scrapy crawl vejasp -t csv -o vejasp.csv 如果您正在修复或改进项目并需要多次运行爬网,您将受益于使用内置的 http 缓存: scrapy crawl --set=HTTPCAC
【文件预览】:
comebebesp-master
----comebebesp()
--------settings.py(503B)
--------pipelines.py(290B)
--------__init__.py(0B)
--------items.py(679B)
--------spiders()
----scrapy.cfg(262B)
----requirements.txt(44B)
----README.md(1KB)
----baressp-sample.csv(2KB)
----.gitignore(637B)
----vejasp-sample.csv(1KB)