文件名称:feature-store-api:Python-Hopsworks功能存储区的JavaScala API
文件大小:48.68MB
文件格式:ZIP
更新时间:2024-04-29 15:00:03
Python
Hopsworks功能商店 HSFS是与Hopsworks Feature Store进行交互的库。 该库使创建新特征,特征组和训练数据集变得容易。 该库与环境无关,可以在两种模式下使用: 火花模式:适用于在要素存储中创建要素或将要素写入要素存储或生成训练数据集的数据工程作业。 它需要一个Spark环境,例如Hopsworks平台或Databricks中提供的环境。 在Spark模式下,HSFS提供针对Python和JVM语言的绑定。 Python模式:用于数据科学工作,以探索功能部件存储中可用的功能,生成训练数据集并将其提供给训练管道。 Python模式仅需要一个Python解释器,并且可以在Python Jobs / Jupyter Kernels,Amazon SageMaker或KubeFlow的Hopsworks中使用。 该库会根据其运行的环境自动进行自我配置。 但是,