文件名称:bigdata-docker-compose:Hadoop,Hive,Spark,Zeppelin和Livy
文件大小:14KB
文件格式:ZIP
更新时间:2024-06-12 17:16:52
Python
大数据游乐场:通过Docker-compose与Hadoop,Hive,Spark,Zeppelin和Livy集群。 我希望能够轻松地处理各种大数据应用程序,即Amazon EMR中的那些应用程序。 理想情况下,这可以在一个命令中提出和拆除。 这就是这个存储库的样子! 成分图像: : : : 用法 克隆: git clone https://github.com/panovvv/bigdata-docker-compose.git 在非Linux平台上,您应为Docker分配比默认情况下更多的RAM(在我的计算机上为2Gb,带16Gb RAM)。 否则,应用程序(在我的情况下为ResourceManager)将偶尔退出,并且您会在日志中看到类似这样的消息: current-datetime INFO org.apache.hadoop.util.JvmPauseMonit
【文件预览】:
bigdata-docker-compose-master
----.gitignore(209B)
----data()
--------batches()
--------ssn-address.tsv(480B)
--------grades.csv(747B)
----zeppelin_notebooks()
--------test_2FVBJBJ1V.zpln(4KB)
----LICENSE(1KB)
----docker-compose.yml(5KB)
----README.md(20KB)
----init.sql(34B)