spark学习-worker工作原理_spark中worker的主要工作-CSDN博客

网站介绍:文章浏览阅读396次。worker工作原理:1.Master要求Worker启动Driver和Executor。(LaunchDriver和LaunchExecutor)2.worker内部会启动一个线程DriverRunner,它会去负责启动Driver进程并进行管理。3.worker内部会启动一个线程ExecutorRunner,它会去负责启动Executor进程并进行管理。4.Executor找到对应Driver..._spark中worker的主要工作