miniscraper:微小的Node.js Web抓取工具

时间:2024-05-26 00:40:37
【文件属性】:

文件名称:miniscraper:微小的Node.js Web抓取工具

文件大小:314KB

文件格式:ZIP

更新时间:2024-05-26 00:40:37

JavaScript

一个用于高度定制的海量数据收集的抓取实用程序。 用法 主刮板模块需要一个job对象,如下所示: var job = { id: 'find_favorite_foods', saveFileName: 'cartoon_characters.json', extractables: [ { field: 'favorite_food', extractMethodName: 'extractOne', location: { selector: '.favorite-food p' } } ], getEntries: function() { return [ { name: 'Jerry', species: 'mouse' }, { name: 'Tom', species: '


【文件预览】:
miniscraper-master
----package.json(549B)
----readme.md(1KB)
----jobs()
--------education_sector_2()
--------education_sector()
--------college_navigator()
--------quick_and_ed()
----.DS_Store(6KB)
----src()
--------scraper.js(2KB)
--------job.js(207B)
--------util()
--------extractor.js(3KB)
----spec()
--------src()
----.gitignore(17B)
----app.js(598B)

网友评论