《Spark Structured Streaming》 官方文档解读

本文原文出处: http://blog.csdn.net/bluishglc/article/details/80423323 严禁任何形式的转载,否则将委托CSDN官方维护权益! 模型思想 从Spark 2.0开始,Spark Streaming引入了一套新的流计...

bluishglc
2018/05/23
0
0
Spark Streaming 框架在 5G 中的应用

原文链接:[https://www.ericsson.com/en/blog/2019/6/applying-the-spark-streaming-framework-to-5g] 编译: 明柏,阿里巴巴计算平台事业部EMR团队技术专家,Apache Spark Contributor,目前...

EMR
06/21
0
0
通过Spark SQL实时归档SLS数据

作者:木艮,阿里云E-MapReduce开发工程师 我在前一篇文章介绍过基于Spark SQL实现对HDFS操作的实时监控报警。今天,我再举例说明一下如何使用Spark SQL进行流式应用的开发。本文主要分成三部...

EMR
06/17
0
0
Spark基于事件时间的“状态”流的深层分析 - withWatermark与mapGroupsWithState的关系

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/bluishglc/article/details/80824522 不管是基于watermark的窗口计算还是自维护的状态流,它们都是有状态的,...

bluishglc
2018/06/27
0
0
Spark 比拼 Flink:下一代大数据计算引擎之争,谁主沉浮?

下一代大数据计算引擎 自从数据处理需求超过了传统数据库能有效处理的数据量之后,Hadoop 等各种基于 MapReduce 的海量数据处理系统应运而生。从 2004 年 Google 发表 MapReduce 论文开始,经...

xiaomin0322
05/29
6
0

没有更多内容

加载失败,请刷新页面

加载更多