mesos-spark:在 mesos 集群上运行 spark 作业

时间:2024-07-26 15:41:00
【文件属性】:

文件名称:mesos-spark:在 mesos 集群上运行 spark 作业

文件大小:1KB

文件格式:ZIP

更新时间:2024-07-26 15:41:00

金币火花 金币的火花。 用法 Docker 镜像由 spark 版本标记。 Mesos 的主 URL 格式为 mesos://host:5050(对于单主 Mesos 集群)或 mesos://zk://host:2181(对于使用 ZooKeeper 的多主 Mesos 集群)。 Spark 发行版 url 应指向您的 Spark 版本的 Spark 发行版。 您可以从 spark 下载页面获取 url 或自己托管(首选选项)。 请注意,您需要编译的 spark 版本,而不是源代码。 火花壳 docker run --rm -t -i --net=host bobrik/mesos-spark:1.1.1 /opt/spark/bin/spark-shell \ --master --conf spark.executor.uri=<spark d


【文件预览】:
mesos-spark-master
----Dockerfile(452B)
----README.md(1KB)

网友评论