文件名称:AppSpider:爬取市场上的app
文件大小:25KB
文件格式:ZIP
更新时间:2024-04-22 05:59:41
Java
AppSpider 爬取市面上的一些App,包括包名,大小,名字,版本号,大分类,细分类,下载地址,应用市场,市场中应用唯一ID 功能模块: 爬虫模块:采用Gecco完成 持久化模块:前期采用MySQL数据库,后期上线采用Oracle 测试模块:采用Junit完成测试 日志模块:采用log4j完成日志记录 调度模块:暂时未定 管理模块,目前准备采用控制台的方式 问题 华为的appId不太对ac6829897ec3484a8f0efb881420d361 爬虫的初始URL [ { " // " : "应用宝" , " url " : " https://android.myapp.com/myapp/index.htm " }, { " // " : "华为影音娱乐" , " url " : " https://web-drcn.hispace.
【文件预览】:
AppSpider-master
----.gitignore(61B)
----src()
--------main()
--------test()
----pom.xml(3KB)
----readme.md(6KB)