文件名称:knit:不推荐使用,请使用https
文件大小:71KB
文件格式:ZIP
更新时间:2024-05-28 18:10:22
yarn hadoop dask Python
针织 注意:该库已被Skein( )取代,并且不再维护。 有关在YARN上部署Dask的信息,请参见dask-yarn( ),该书已被重写为使用Skein而不是Knit。 对于用户问题,请参考这些存储库中的任何一个 Dask-Yarn用于在YARN上部署Dask( ) 普通YARN / Python交互的绞线( ) knit库为Scala提供了Python接口,可与YARN资源管理器进行交互。 查看有关knit的。 概述 knit ,您可以将python与YARN(Hadoop系统最常见的资源管理器)结合使用。 它提供了以下高级入口点: CondaCreator ,一种创建压缩conda环境的方法,因此可以将其上传到HDFS并提取出来以在YARN容器中使用 YARNAPI ,是YARN资源管理器的接口,用于获取应用程序/容器状态,日志并YARNAPI正在运行的作业 K
【文件预览】:
knit-master
----.binstar.yml(257B)
----MANIFEST.in(176B)
----.travis.yml(743B)
----README.rst(2KB)
----continuous_integration()
--------simple_test.sh(210B)
--------coverage_test.sh(231B)
--------coverage_upload.sh(24B)
--------README.md(2KB)
----.coveragerc(95B)
----docs()
--------make.bat(7KB)
--------requirements.txt(9B)
--------Makefile(7KB)
--------source()
----env.yml(138B)
----dask_yarn()
--------core.py(7KB)
--------tests()
--------__init__.py(57B)
----knit_jvm()
--------pom.xml(4KB)
--------src()
----LICENSE(1KB)
----knit()
--------conf.py(6KB)
--------core.py(23KB)
--------utils.py(1KB)
--------java_libs()
--------compatibility.py(930B)
--------tests()
--------__init__.py(643B)
--------env.py(8KB)
--------yarn_api.py(13KB)
--------exceptions.py(177B)
----requirements.txt(13B)
----setup.py(1KB)
----.gitignore(385B)
----readthedocs.yml(25B)
----.gitattributes(30B)