Spark Core之RDD依赖关系及血缘_rdd依赖关系打印依赖关系-CSDN博客

网站介绍:文章浏览阅读176次。目录一、RDD的依赖关系1.1窄依赖1.2宽依赖查看源码二、Lineage(⾎统)&容错性Lineage容错性一、RDD的依赖关系RDD和它依赖的⽗RDD(s)的关系有两种不同的类型,即窄依赖(narrow dependency)和宽依赖(wide dependency)。注: 使⽤代码 rdd.toDebugString 可打印依赖关系1.1窄依赖说明:⽗RDD的每个分区只被⼀个⼦RDD分区使⽤..._rdd依赖关系打印依赖关系