文件名称:toy-applied-ml-pipeline:我可以使用的ML管道的玩具示例,以尝试使用MLOps工具
文件大小:12KB
文件格式:ZIP
更新时间:2024-03-26 01:33:09
Python
玩具应用的毫升管道 这是一个应用的ML管道的玩具示例,我可以尝试使用MLOps工具。 我会在其他人感兴趣的情况下将其公开,但是我现在不完全致力于完善文档。 该管道的目的是使开发“ MLOps”工具更加容易,因为很难在真空中开发devtol :) 预测任务 我将在利用以前训练过的玩具任务。 对于即将出现的任何记录,我们都希望预测乘客是否会给小费。 管道组件 从根本上说,这个管道将由数据转换,模型和输出转换组成。 首先,我将以轻量级的方式构建此系统以在我的机器上运行。 原始数据存储在公共s3存储桶中。 我将编写以下组件: 数据清理 特色化 预处理 模型推论 [可选]输出后处理 我将在离线设置中训练模型,并将其用于模型推断设置。 对于第一遍,我将不会处理模型的版本控制-只会处理数据(如果有)。 对于第二遍,我将合并MLFlow模型以进行模型版本控制。 我会想到一种进行数据版本控制的聪明方法(