其运行过程如下-spark基础知识讲解

时间:2024-05-16 04:02:50
【文件属性】:

文件名称:其运行过程如下-spark基础知识讲解

文件大小:1.83MB

文件格式:PPT

更新时间:2024-05-16 04:02:50

spark 原理

其运行过程如下: 1.SparkContext连接到Master,向Master注册并申请资源(CPU Core 和Memory); 2.Master根据SparkContext的资源申请要求和Worker心跳周期内报告的信息决定在哪个Worker上分配资源,然后在该Worker上获取资源,然后启动StandaloneExecutorBackend; 3.StandaloneExecutorBackend向SparkContext注册;


网友评论