文件名称:伦敦:在Python和Hadoop中实现Map Reduce作业
文件大小:694KB
文件格式:ZIP
更新时间:2024-03-09 12:52:37
python nlp docker natural-language-processing hadoop
伦敦 使用Python和GraphX的Spark中的身份图。 参考 指示 创建虚拟环境 virtualenv -p python3 .env source .env/bin/activate pip install -r requirements.txt 构建Docker映像 ./bin/build.sh slave ./bin/build.sh master ./bin/build.sh zoo ./bin/build.sh network 运行Docker容器 ./bin/start.sh slave ./bin/start.sh master ./bin/start.sh zoo 使用Hadoop集群UI 访问http://0.0.0.0:8088/cluster 。 监控Docker容器 ./bin/status.sh 停止Docker容器 ./bin/stop.sh slave
【文件预览】:
london-master
----.gitignore(67B)
----requirements.txt(28B)
----hadoop.env(3KB)
----bin()
--------stop.sh(3KB)
--------status.sh(1KB)
--------start.sh(4KB)
--------build.sh(4KB)
----Base.Dockerfile(3KB)
----hadoop.png(238KB)
----docker-compose.yml(3KB)
----README.md(1KB)
----london.jpg(474KB)