文件名称：Web-Crawler:可销售的网络爬虫？
文件大小：235KB
文件格式：ZIP
更新时间：2024-06-03 23:26:29
java distributed-systems webcrawler HTML
分布式网络爬虫 这个项目是基于研究的，这意味着到目前为止，我已经实现了从阅读书籍或在线论文中学到的东西。 我不知道自己做的事是否正确，但我知道我喜欢自己在做什么，并且从中学到了很多。 用法 首先，使用以下命令运行docker compose $ docker-compose up -d 然后在安装了maven的情况下运行 $ mvn exec:java@master 或与Dockerfile一起运行 $ docker build -f Dockerfile_Master -t master . && docker run '--network=host' -it master 然后在另一个终端窗口中运行 $ mvn exec:java@slave 或与Dockerfile一起运行 $ docker build -f Dockerfile_Slave -t slave . &&