热线电话:13121318867

登录
2018-11-17 阅读量: 686
RDD分区是什么?

RDD 内部的数据集合在逻辑上和物理上被划分成多个小子集合,这样的每一个子集合我们将其称为分区,分区的个数会决定并行计算的粒度,而每一个分区数值的计算都是在一个单独的任务中进行,因此并行任务的个数,也是由 RDD分区的个数决定的。

0.0000
2
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子