- 链接地址:https://blog.csdn.net/CyAurora/article/details/119649181
- 链接标题:Spark Core之RDD依赖关系及血缘_rdd依赖关系打印依赖关系-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:9401
文章浏览阅读176次。目录一、RDD的依赖关系1.1窄依赖1.2宽依赖查看源码二、Lineage(⾎统)&容错性Lineage容错性一、RDD的依赖关系RDD和它依赖的⽗RDD(s)的关系有两种不同的类型,即窄依赖(narrow dependency)和宽依赖(wide dependency)。注: 使⽤代码 rdd.toDebugString 可打印依赖关系1.1窄依赖说明:⽗RDD的每个分区只被⼀个⼦RDD分区使⽤..._rdd依赖关系打印依赖关系
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除