文件名称:distributedCrawl:使用 MySQLMariaDB 表作为队列将抓取作业分发到 PhantomJS 进程
文件大小:8KB
文件格式:ZIP
更新时间:2024-07-16 09:07:32
JavaScript
分布式爬网 使用 MySQL/MariaDB 表作为队列将抓取作业分发到 PhantomJS 进程。
【文件预览】:
distributedCrawl-master
----.gitignore(587B)
----package.json(963B)
----index.js(3KB)
----master.js(4KB)
----parseResult.js(7KB)
----README.md(109B)
----worker.js(1KB)
----sequelize.js(4KB)