【文件属性】:
文件名称:酒店推荐系统源码java-dlwithluigi:dlwithluigi
文件大小:18KB
文件格式:ZIP
更新时间:2021-06-06 22:08:16
系统开源
酒店推荐系统源码java
Luigi
是一个
Python(3.6、3.7
测试)包,可帮助您构建复杂的批处理作业管道。
它处理依赖项解析、工作流管理、可视化、处理故障、命令行集成等等。
入门
运行pip
install
luigi从
.
托管在
readthedocs
上。
运行pip
install
luigi[toml]以在支持下安装
Luigi。
对于最前沿的代码,
pip
install
git+https://github.com/spotify/luigi.git
。
也可用。
背景
Luigi
的目的是解决通常与长时间运行的批处理相关的所有管道问题。
您想要链接许多任务,将它们自动化,并且会发生故障。
这些任务可以是任何任务,但通常是长时间运行的任务,例如作业、向/从数据库转储数据、运行机器学习算法或其他任何任务。
还有其他软件包专注于数据处理的较低级别方面,例如
、
或
。
Luigi
不是替代这些的框架。
相反,它可以帮助您将许多任务拼接在一起,其中每个任务可以是一个
、一个
、一个
、一个
Python
片段、来自数据库或其他任何东西。
构建包含数千个任务并需要数
【文件预览】:
dlwithluigi-master
----MANIFEST.in(147B)
----RELEASE-PROCESS.rst(839B)
----README.rst(12KB)
----codecov.yml(976B)
----CONTRIBUTING.rst(2KB)
----.travis.yml(3KB)
----tox.ini(4KB)
----LICENSE(11KB)
----setup.py(4KB)
----.gitignore(2KB)
----.coveragerc(299B)