day69、70 Spark 架构 常见算子 接着有的没的-CSDN博客

网站介绍:文章浏览阅读1.5k次。文章目录一、一些架构1、Spark 简单架构2、yarn-client3、yarn-cluster二、一些架构I know, i know地球另一端有你陪我一、一些架构1、Spark 简单架构算子会在 Excutor 中的线程池中进行,而算子之外的命令都会在 Driver 中执行2、yarn-client3、yarn-cluster一个较大的区别是 Driver 端启动的位置不一样另一个是日志的打印位置,cluster 不会将日志全部打印在本地(Driver)可以