Spark Core_partitioner函数不但决定了rdd本身的分片数量,也决定了parent rdd shuffl-CSDN博客

网站介绍:文章浏览阅读958次。一 RDD概念1 RDD为什么会产生2 RDD概述21 什么是RDD22 RDD的属性3 13 RDD弹性4 RDD特点41 分区42 只读43 依赖44 缓存45 checkpoint二 RDD编程1 编程模型2 22 创建RDD一、 RDD概念1.1 RDD为什么会产生RDD是Spark的基石,是实现Spark数据处理的核_partitioner函数不但决定了rdd本身的分片数量,也决定了parent rdd shuffle输出时