加载中
SparkStreaming转化操作

DStream的转化操作分为无状态 和有状态 两种 在无状态转化操作中,每个批次的处理不依赖于之前批次的数据。 有状态转化操作需要使用之前批次的数据或者中间结果来计算当前批次的数据,有状态...

def
02/13 20:14
1.4K
spark学习04- RDD 依赖关系

依赖关系 基本概念 RDD的依赖关系有一种类似于上下文之间的联系,这种关系也是存在于各个RDD算子间的,相邻两个RDD间的关系被称作依赖关系,多个连续的RDD之间的关系,被称作血缘关系。 每个...

01/11 10:20
64

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部