RDD的5大特性

原创
2017/04/13 16:42
阅读数 1.6K

RDD 5大特性

1.分区

2.计算 一个function作用在一个分区上

3.依赖 RDD和RDD之间存在着依赖关系

4.对kv类型的rdd,可以自定义分区

5.如果是从HDFS类型的文件系统上读取数据,会返回一个最佳位置(移动计算而不是移动数据,数据本地化)

展开阅读全文
打赏
0
0 收藏
分享
加载中
更多评论
打赏
0 评论
0 收藏
0
分享
返回顶部
顶部