distributedCrawl:使用 MySQLMariaDB 表作为队列将抓取作业分发到 PhantomJS 进程

时间:2024-07-16 09:07:32
【文件属性】:

文件名称:distributedCrawl:使用 MySQLMariaDB 表作为队列将抓取作业分发到 PhantomJS 进程

文件大小:8KB

文件格式:ZIP

更新时间:2024-07-16 09:07:32

JavaScript

分布式爬网 使用 MySQL/MariaDB 表作为队列将抓取作业分发到 PhantomJS 进程。


【文件预览】:
distributedCrawl-master
----.gitignore(587B)
----package.json(963B)
----index.js(3KB)
----master.js(4KB)
----parseResult.js(7KB)
----README.md(109B)
----worker.js(1KB)
----sequelize.js(4KB)

网友评论