【文件属性】：
文件名称：SparkDefinitiveGuide：“ Spark，权威指南”的示例代码
文件大小：537KB
文件格式：ZIP
更新时间：2021-02-18 08:19:57
JupyterNotebook
SparkDefinitiveGuide
“ Spark The Definitive Guide”的示例代码
安装실습환경
를를있게를를용합니용합니용합니。 Jupyter笔记本으로구성되어있습니다。
사 전 에 와 가 필 요 합 니 다 。
克隆存储库
repository储存库후克隆후，폴더로이동합니다。
git clone https://github.com/dream2globe/SparkDefinitiveGuide.git
cd SparkDefinitiveGuide
子模块세팅
'스파크가이드' 져오져 오져오로구성되어있습니다。 。책예파일의져옵니져옵니져옵니져옵니져옵니져옵니。
git submodule init
git submodule update
码头工人
docker있도록있도록타편하게용할있도록 설정되어다。 （참고。 ）
개발
【文件预览】：
SparkDefinitiveGuide-master
----.gitignore(2KB)
----Dockerfile(2KB)
----Makefile(179B)
----docker-compose.yml(1KB)
----.gitmodules(110B)
----scripts()
--------entrypoint.sh(338B)
----README.md(2KB)
----conf()
--------metastore-site.xml(1KB)
----BookSamples()
----MyNotes()
--------Chapter02_IntroductionToSpark.ipynb(11KB)
--------Chapter22_ProcessingBasedonEventTimeNStatus.ipynb(45KB)
--------Chapter23_StreammingOps.ipynb(7KB)
--------Chapter10_SparkSQL.ipynb(23KB)
--------Chapter06_DataType.ipynb(87KB)
--------Chapter24_MLlib.ipynb(32KB)
--------Chapter07_Aggregation.ipynb(40KB)
--------Chapter26_Classification.ipynb(24KB)
--------PandasUdf.ipynb(11KB)
--------Chapter21_StructuredStreamingAPI.ipynb(22KB)
--------Chapter09_DataSource.ipynb(61KB)
--------Chapter04_05_StructuredApi_BasicOperation.ipynb(617KB)
--------Chapter25_FeatureEngineering.ipynb(72KB)
--------Chapter14_DistributionSharedVariable.ipynb(10KB)
--------Chapter06-01_UserDefinedFunction.ipynb(2KB)
--------Chapter08_Join.ipynb(77KB)
--------Chapter03_SparksToolsetTour.ipynb(38KB)
--------Chapter09_MySqlEx.sql(242B)
--------Chapter07-01_UserDefinedAggregationFunction.ipynb(4KB)