RDD被设计为可以记录依赖关系，关系可以分为两类：窄依赖和宽依赖。
窄依赖：表示父亲 RDD 的一个分区最多被子 RDD 一个分区所依赖。
宽依赖：表示父亲 RDD 的一个分区可以被子 RDD 的多个子分区所依赖。
如下图，左边是窄依赖，右边是宽依赖：
原创文章，作者：geekgao，如若转载，请注明出处：https://www.geekgao.cn/archives/108
赞 (0)
微信 
支付宝
maven打包如何包含本地jar包内容
上一篇
2017年11月21日 下午6:30
Spark的Job、Stage、Task是按何种规则产生的
下一篇
2018年1月24日 下午6:25
评论列表（1条）
[…] spark RDD 宽依赖与窄依赖 […]