文件名称:maplight-scraper:无法通过 MapLight API 访问的数据抓取工具
文件大小:459KB
文件格式:ZIP
更新时间:2024-07-12 01:38:42
JavaScript
MapLight 刮板
在其网站上提供了大量有趣的数据,这些工具可以帮助您访问这些数据。 如果您对使用他们的 API 感兴趣,还可以查看 。
入门
批量数据
在./maplight-data您将找到批量数据文件,这些文件详细说明了不同版本账单的行业立场。 这些数据将成为我们进一步工作的基础。
刮刀
这个 repo 被设置为一个用于抓取 maplight 的节点包。 它可以提取两个主要数据集,法案“描述”(有关法案所在的议院的信息,对其采取的行动等)和“贡献”(有关投资于投票的利益集团的贡献的信息)。
要运行刮刀:
cd maplight-scraper
npm install
node scraper.js "./maplight-data/
【文件预览】:
maplight-scraper-master
----.gitignore(12B)
----munger.jl(2KB)
----package.json(211B)
----scraper.js(6KB)
----README.md(1KB)
----maplight-data()
--------maplight-113th-bills-2014-11-14.csv(5.96MB)
--------maplight-112th-bills-2014-08-22.csv(4.25MB)