网站介绍:文章浏览阅读396次。worker工作原理:1.Master要求Worker启动Driver和Executor。(LaunchDriver和LaunchExecutor)2.worker内部会启动一个线程DriverRunner,它会去负责启动Driver进程并进行管理。3.worker内部会启动一个线程ExecutorRunner,它会去负责启动Executor进程并进行管理。4.Executor找到对应Driver..._spark中worker的主要工作
- 链接地址:https://blog.csdn.net/ymcz1987/article/details/79469187
- 链接标题:spark学习-worker工作原理_spark中worker的主要工作-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:6206
- 网站标签:spark中worker的主要工作