文件名称：compute-hadoop-java-python:该软件演示了一种创建和管理在Google Compute Engine上运行的Hadoop节点集群的方法
文件大小：61KB
文件格式：ZIP
更新时间：2024-05-27 13:23:43
Python
该项目不再积极地开发或维护。 有关Compute Engine的更多信息，请参阅我们的。 计算hadoop-java-python 该软件演示了一种创建和管理在Google Compute Engine上运行的Hadoop节点集群的方法。 概述 该软件演示了一种创建和管理在Google Compute Engine上运行的Hadoop节点集群的方法。 Compute可用于托管Hadoop集群。 一个实例被指定为“协调人”。 响应经过身份验证的RESTful请求，协调器会在运行MapReduce作业的整个生命周期中协调不同的步骤。 协调器可以启动集群，以正确的顺序启动Hadoop守护程序，将数据从Web或Google Storage导入HDFS，提交MapReduce作业，将数据从HDFS导出回Google Storage，并监视所有这些步骤。 协调器本身是一个瘦Web服务器包装，它围
【文件预览】：
compute-hadoop-java-python-master
----one_time_setup.sh(2KB)
----start_setup.sh(1KB)
----cfg.py(4KB)
----CONTRIB.md(3KB)
----LICENSE(11KB)
----tools()
--------begin_hadoop.py(1KB)
--------launch_coordinator.py(3KB)
--------download_results.py(1KB)
--------clean_hdfs.py(1022B)
--------gen_passwd.py(950B)
--------authorize_gce.py(791B)
--------ui_links.py(2KB)
--------status.py(927B)
--------job_terasort.py(3KB)
--------common.py(5KB)
--------add_slaves.py(1023B)
--------teardown.py(1KB)
----java()
--------src()
--------pom.xml(2KB)
----README.md(7KB)
----util.py(9KB)
----coordinator()
--------__init__.py(0B)
--------hadoop_cluster.py(13KB)
--------bootstrap.sh(2KB)
--------coordinator.py(5KB)
----hadoop()
--------setup_hadoop.py(3KB)
--------jobtracker_snitch.py(2KB)
--------common_snitch.py(2KB)
--------slave_snitch.py(1KB)
--------namenode_snitch.py(2KB)
--------bootstrap.sh(2KB)
--------conf()
----docs()
--------BUGS(670B)
--------SECURITY(1KB)
--------TODO(2KB)
--------architecture.gv(1KB)
--------API(6KB)
--------MANIFEST(1KB)