spark-ml-serving:Spark ML Lib服务库

时间:2024-06-05 08:51:24
【文件属性】:

文件名称:spark-ml-serving:Spark ML Lib服务库

文件大小:2.13MB

文件格式:ZIP

更新时间:2024-06-05 08:51:24

spark inference scoring serving Scala

Spark-ml-serving Spark ML的无上下文ML实现。 提议 为了服务于小型ML管道,无需创建SparkContext并使用与群集相关的功能。 在这个项目中,我们实现了ML Transformer的实现。 其中一些调用上下文无关的Spark方法。 结构 代替使用DataFrame ,我们实现了简单的LocalData类来摆脱SparkContext 。 所有Transformer都被重写以接受LocalData 。 如何使用 将此项目作为依赖项导入: scalaVersion : = " 2.11.8 " // Artifact name is depends of what version of spark are you usng for model training: // spark 2.0.x libraryDependencies + = Seq ( "


网友评论