文件名称:AzureDeploySpark:Spark 的 Azure 部署模板
文件大小:12KB
文件格式:ZIP
更新时间:2024-07-01 06:06:57
Shell
使用自定义脚本 Linux 扩展在 Ubuntu 虚拟机上安装 Spark 集群 此模板在 Ubuntu 虚拟机上部署 Spark 集群。 该模板在一个可用性集中提供 3 个专用主节点,在另一个可用性集中提供可配置数量的数据节点。 负载均衡器配置了一个规则,将端口 9200 上的流量路由到客户端/数据节点,还包括用于管理的 SSH nat 规则。 Spark 数据节点配置为使用附加到每个虚拟机的多个数据磁盘存储索引。 此模板还部署了存储帐户、虚拟网络、可用性集、公共 IP 地址、负载均衡器和网络接口。 以下是模板期望的参数 名称 描述 存储帐户名 将放置虚拟机磁盘的存储帐户的唯一 DNS 名称。 管理员用户名 虚拟机的用户名 管理员密码 虚拟机的密码 LBIP 的 dns 名称 用于负载均衡器的公共 IP 的唯一 DNS 名称。 地区 将部署资源的区域 虚拟网络名称 虚拟网络名称
【文件预览】:
AzureDeploySpark-master
----.gitignore(574B)
----azuredeploy.json(16KB)
----spark-azure-install.sh(7KB)
----metadata.json(768B)
----README.md(3KB)
----spark-cluster-setup.sh(789B)
----azuredeploy-parameters.json(530B)
----spark-cluster-install.sh(7KB)
----.gitattributes(378B)