spark常见的转换和动作_简述spark的转换和动作操作-CSDN博客

网站介绍:文章浏览阅读909次。RDD支持两种操作:转换:从现有的数据集创建一个新的数据集;动作:在数据集上运行计算后,返回一个值给驱动程序。例如,map 是一种转换,它将数据集每一个元素都传递给函数,并返回一个新的分布数据集表示结果,而 reduce 是一种动作,通过一些函数将所有的元素叠加起来,并将最终结果返回给运行程序。Spark 中的 所有转换都是惰性的,也就是说,他们并不会直接计算结果。相反的,它们只是_简述spark的转换和动作操作