yarn-starter:编写分布式容错YARN应用程序的入门示例

时间:2024-06-07 12:05:55
【文件属性】:

文件名称:yarn-starter:编写分布式容错YARN应用程序的入门示例

文件大小:43KB

文件格式:ZIP

更新时间:2024-06-07 12:05:55

Java

纱线启动器 (又名NextGen MapReduce)对于构建容错的分布式应用程序非常有用。 但是编写,甚至可能成为。 好消息是,简化了与YARN交互的框架应运而生,并加入了Apache基金会: 。 虽然仍处于孵化阶段,但该项目看起来确实很有希望,并允许编写(更易于测试) 应用程序并在YARN上运行它们。 该项目的目标是减少编写容错YARN应用程序的入门门槛,主要是利用Twill(在撰写本文时)。 在, 和阅读有关斜纹的更多。 简单的斜纹应用示例 是使用Twill部署在YARN上的一个非常简单的应用程序。 该应用程序基本上会打印出类似“ hello world”的消息并退出。 SimpleTwillTest测试类扩展了 ,它负责启动嵌入式服务器以及 。 多条可运行斜纹布应用示例 使用Twill,您可以运行几个不同的TwillRunnable 。 此示例运行2个不同的应用程序:


【文件预览】:
yarn-starter-master
----.gitignore(75B)
----src()
--------main()
--------test()
----lombok.config(25B)
----pom.xml(17KB)
----README.md(6KB)
----.gitattributes(378B)
----docs()
--------twill-flow.dia(3KB)

网友评论