文件名称:spark-essentials:Rock with scala的Rock the JVM Spark Essentials课程的官方存储库
文件大小:7.88MB
文件格式:ZIP
更新时间:2024-05-29 07:31:39
Scala
Rock with scala的Rock the JVM Spark Essentials课程的官方存储库 该存储库包含我们在期间编写的代码(Udemy版本),除非明确提及,否则该存储库中的代码正是在相机上捕获的。 如何安装 安装Docker 克隆仓库或以zip格式下载 与IntelliJ一起作为SBT项目打开 在终端窗口中,导航到下载此仓库的文件夹,然后运行docker-compose up来构建和启动PostgreSQL容器-我们将通过Spark与之交互 在另一个终端窗口中,导航到spark-cluster/并使用以下命令构建基于Docker的Spark集群 chmod +x build-images.sh ./build-images.sh 当提示您启动Spark集群时,转到spark-cluster文件夹并运行docker-compose up --scale spark-wor
【文件预览】:
spark-essentials-master
----.gitignore(4KB)
----docker-clean.sh(41B)
----README.md(2KB)
----build.sbt(748B)
----docker-compose.yml(293B)
----.dockerignore(0B)
----psql.sh(420B)
----sql()
--------db.sql(13.48MB)
----src()
--------main()
----spark-cluster()
--------README.md(8KB)
--------build-images.sh(242B)
--------docker-compose.yml(626B)
--------docker()
--------env()
----project()
--------build.properties(19B)