文件名称:OpenScraper:用于抓取的开源Web应用程序:面向Web抓取的公共服务
文件大小:9.68MB
文件格式:ZIP
更新时间:2024-02-23 23:55:02
python html scraper spider mongodb
OpenScraper TADATA的1/3! 软件套件( / / / ) 网络抓取的公共服务 OpenScraper是具有简单界面的简约,开放源代码Webscraper,因此几乎所有技术知识很少的人都可以抓取公共数据并为自己的目的安装/修改它……免费。 ...反正这就是人们的目标! ... (目前是开发阶段) OpenScraper是一个项目 #Python#龙卷风#草皮#Selenium#mongodb #bulma 有什么新消息? v1.4-07/02/2019:为响应网站添加无限滚动以废弃 v1.3-20/10/2018:为每个蜘蛛的数据集添加了第一个csv转换器和下载器,并为文档提供了第一条路线 v1.2-18/10/2018:蜘蛛可以适应以下页面,无论它们是API还是HTML v1.1-15/10/2018:解析器适应API Rest,基于JSON内部路径的基于“ /”描述的配置 v1.0-10/06/2018:解析器适用于React式网站(SPA,vue等...) vBeta:基于带有Xpath的Spider配置的Scrapy解析器 论据 该项目旨在应