【文件属性】:
文件名称:svs-mapper:为智利的SVS网站报废蜘蛛
文件大小:12KB
文件格式:ZIP
更新时间:2021-04-29 08:33:43
Python
#SVS映射器抓取
此存储库包含用于在SVS站点(智利)中抓取数据的项目。 该项目是使用python Scrapy Framework构建的。
网站
http://www.svs.cl
包含来自受SVS监管的公司的数据-智利(Superintendencia de valores y Servicios)
观察:我们已计划废弃南美和加勒比海地区的所有类似地点。 请在“问题”部分中发送请求以添加新站点。
要求
python 2.7
Scrapy框架0.24.6
安装
如果您使用Windows,Mac或任何Linux,则必须遵循以下说明。
打开一个终端窗口。
克隆仓库: git clone https://github.com/poderomedia/svs-mapper
移至repo目录: cd svs-mapper
安装要求: pip install requirements
【文件预览】:
svs-mapper-master
----svs_mapper()
--------settings.py(572B)
--------pipelines.py(545B)
--------__init__.py(0B)
--------items.py(926B)
--------spiders()
----Using-Solr.md(707B)
----scrapy.cfg(262B)
----requirements.txt(16B)
----README.md(3KB)
----.gitignore(122B)