文件名称:lambda-spark-executor:Apache Spark AWS Lambda执行器(SAMBA)
文件大小:150KB
文件格式:ZIP
更新时间:2024-05-28 18:12:15
Scala
#Apache Spark AWS Lambda执行器(SAMBA) SAMBA是一个软件包,提供与计算服务的无缝集成,用于JVM上的Spark批处理和流应用程序。 该库建立在库的基础上, 库是一个轻量级的Java客户端库,用于调用公开的 。 SAMBA动机 在传统的Spark部署中,RDD任务是使用Spark集群中的工作节点上的固定计算资源执行的。 借助SAMBA,应用程序开发人员可以委派选定的RDD任务,以使用云中的按需AWS Lambda计算基础架构执行。 更一般而言,SAMBA还为Spark应用程序提供了一种简单而强大的机制,以与AWS API Gateway上公开的常规REST服务集成。 SAMBA实例 提供了许多示例应用程序,以演示如何使用SAMBA库交付RDD任务委派和REST集成。 RDD任务委托[ ] [ ] REST集成[ ] [ ] SAMBA SBT
【文件预览】:
lambda-spark-executor-master
----.gitignore(185B)
----project()
--------assembly.sbt(57B)
----src()
--------main()
--------test()
----assets()
--------spark.png(6KB)
----LICENSE(11KB)
----examples()
--------scala()
--------java()
----README.md(6KB)
----PITCHME.yaml(38B)
----PITCHME.md(2KB)
----build.sbt(504B)