文件名称:mesos-spark:在 mesos 集群上运行 spark 作业
文件大小:1KB
文件格式:ZIP
更新时间:2024-07-26 15:41:00
金币火花
金币的火花。
用法
Docker 镜像由 spark 版本标记。
Mesos 的主 URL 格式为 mesos://host:5050(对于单主 Mesos 集群)或 mesos://zk://host:2181(对于使用 ZooKeeper 的多主 Mesos 集群)。
Spark 发行版 url 应指向您的 Spark 版本的 Spark 发行版。 您可以从 spark 下载页面获取 url 或自己托管(首选选项)。 请注意,您需要编译的 spark 版本,而不是源代码。
火花壳
docker run --rm -t -i --net=host bobrik/mesos-spark:1.1.1 /opt/spark/bin/spark-shell \
--master
【文件预览】:
mesos-spark-master
----Dockerfile(452B)
----README.md(1KB)