spark任务的提交执行流程_spark maptask-CSDN博客

网站介绍:文章浏览阅读534次。极简版:1,Driver端向Master发送任务信息2,Master接收到任务信息后,把任务信息放到一个队列中3,Master找到比较空闲的Worker,并通知Worker来拿取任务信息4,Worker向Master拿取任务信息,同时启动Executor子进程5,Executor启动后,开始向Driver端反向注册6,Driver开始向向相应Executor发送任务(tas..._spark maptask