伦敦:在Python和Hadoop中实现Map Reduce作业

时间:2024-03-09 12:52:37
【文件属性】:

文件名称:伦敦:在Python和Hadoop中实现Map Reduce作业

文件大小:694KB

文件格式:ZIP

更新时间:2024-03-09 12:52:37

python nlp docker natural-language-processing hadoop

伦敦 使用Python和GraphX的Spark中的身份图。 参考 指示 创建虚拟环境 virtualenv -p python3 .env source .env/bin/activate pip install -r requirements.txt 构建Docker映像 ./bin/build.sh slave ./bin/build.sh master ./bin/build.sh zoo ./bin/build.sh network 运行Docker容器 ./bin/start.sh slave ./bin/start.sh master ./bin/start.sh zoo 使用Hadoop集群UI 访问http://0.0.0.0:8088/cluster 。 监控Docker容器 ./bin/status.sh 停止Docker容器 ./bin/stop.sh slave


【文件预览】:
london-master
----.gitignore(67B)
----requirements.txt(28B)
----hadoop.env(3KB)
----bin()
--------stop.sh(3KB)
--------status.sh(1KB)
--------start.sh(4KB)
--------build.sh(4KB)
----Base.Dockerfile(3KB)
----hadoop.png(238KB)
----docker-compose.yml(3KB)
----README.md(1KB)
----london.jpg(474KB)

网友评论