文件名称：Scraper:我的足球网络项目的抓取工具
文件大小：346KB
文件格式：ZIP
更新时间：2024-06-10 03:10:50
JavaScript
刮刀 我的足球网络项目的抓取工具我的目标是抓取topdrawersoccer.com以获取每所DI，DII和DIII大学的所有基本足球信息，然后在这些大学的大学信息站点中搜索并抓取诸如费用， SAT的平均分数，所提供的学位和学生人数。 我在使用casperjs和phantomjs时要牢记以下计划。 脚步 抓取 ，以获取指向TDS.com域中每个大学信息页的链接。 对于每个链接，创建一个大学对象，并填充从TDS.com上特定大学页面抓取的相关字段。 一旦返回所有足球数据，请在学校找到基本的大学信息.....需要在此处选择一个域 返回所有学校的Json文件及其信息 将Json文件拖放到MongoDB中 开始构建Ruby Webb应用程序。
【文件预览】：
Scraper-master
----tds.js(7KB)
----README.md(896B)
----screenshot.png(159KB)
----output1.csv(96KB)
----page.png(159KB)
----output.json(172KB)