flintrock:用于启动Apache Spark集群的命令行工具

时间:2024-05-27 04:32:57
【文件属性】:

文件名称:flintrock:用于启动Apache Spark集群的命令行工具

文件大小:103KB

文件格式:ZIP

更新时间:2024-05-27 04:32:57

apache-spark ec2 orchestration apache-spark-cluster spark-ec2

Flintrock是用于启动集群的命令行工具。 网路上的摩登原始人 Flintrock在网络上的一些讲座,指南和论文中都有介绍。 会谈: ( ) 指南: 在集群上运行Spark:基础知识(使用Flintrock) 文件: 用法 假设您已经,这是在EC2上启动集群的快速方法。 Flintrock与Amazon Linux配合使用效果最佳。 您可以获取最新的AMI ID。 flintrock launch test-cluster \ --num-slaves 1 \ --spark-version 3.0.1 \ --ec2-key-name key_name \ --ec2-identity-file /path/to/key.pem \ --ec2-ami ami-0beafb294c86717a8 \ --ec2-user ec


【文件预览】:
flintrock-master
----setup.py(2KB)
----.gitignore(904B)
----flintrock-logo.png(18KB)
----flintrock()
--------templates()
--------config.yaml.template(2KB)
--------__init__.py(129B)
--------flintrock.py(44KB)
--------scripts()
--------util.py(2KB)
--------__main__.py(164B)
--------ec2.py(41KB)
--------ssh.py(5KB)
--------services.py(19KB)
--------core.py(30KB)
--------exceptions.py(1KB)
----COPYRIGHT(577B)
----hook-flintrock.py(142B)
----.travis.yml(715B)
----MANIFEST.in(224B)
----standalone.py(192B)
----CONTRIBUTING.md(8KB)
----LICENSE(11KB)
----setup.cfg(241B)
----.github()
--------PULL_REQUEST_TEMPLATE.md(90B)
--------ISSUE_TEMPLATE.md(191B)
--------workflows()
----generate-standalone-package.py(1KB)
----README.md(18KB)
----tests()
--------conftest.py(6KB)
--------test_acceptance.py(5KB)
--------test_pyinstaller_packaging.py(2KB)
--------test_core.py(1KB)
--------test_ec2.py(1KB)
--------README.md(2KB)
--------test_util.py(869B)
--------test_flintrock.py(4KB)
--------test_static.py(1KB)
--------test_scripts.py(1006B)
----test-infra()
--------.gitignore(48B)
--------delete-test-infra.sh(657B)
--------variables.tf(196B)
--------provider.tf(102B)
--------README.md(2KB)
--------network.tf(2KB)
--------bastion.tf(3KB)
----CHANGES.md(13KB)
----requirements()
--------maintainer.in(68B)
--------developer.in(135B)
--------user.pip(931B)
--------user.in(445B)
--------maintainer.pip(4KB)
--------developer.pip(2KB)
----make-release.sh(1KB)

网友评论