加载中
Test

$$x\in { R }^{ { x }_{ n } }$$

2017/11/12 08:56
48
Spark Streaming使用Kafka保证数据零丢失

spark streaming如何保证数据不丢失,并且保证exactly-once。

2016/01/16 17:11
2.8K
Spark Shuffle之Tungsten Sort Shuffle

正如你所知,spark实现了多种shuffle方法,通过 spark.shuffle.manager来确定。暂时总共有三种:hash shuffle、sort shuffle和tungsten-sort shuffle,从1.2.0开始默认为sort shuffle。本节主...

2016/01/14 07:48
713
Spark Shuffle之Sort Shuffle

正如你所知,spark实现了多种shuffle方法,通过 spark.shuffle.manager来确定。暂时总共有三种:hash shuffle、sort shuffle和tungsten-sort shuffle,从1.2.0开始默认为sort shuffle。本节主...

2016/01/12 07:59
391
Spark Shuffle之Hash Shuffle

正如你所知,spark实现了多种shuffle方法,通过 spark.shuffle.manager来确定。暂时总共有三种:hash shuffle、sort shuffle和tungsten-sort shuffle,从1.2.0开始默认为sort shuffle。本节主...

2016/01/10 18:50
175
spark内存概述

原文地址:(spark-knowledge系列)[https://github.com/jacksu/utils4s/tree/master/spark-knowledge] spark进程是以JVM进程运行的,可以通过-Xmx和-Xms配置堆栈大小,它是如何使用堆栈呢?下...

git基本操作总结

欢迎大家关注: scala工具库 ,里面包含各种库的测试用例和使用说明文档

2015/12/01 11:58
145
scala-常用函数介绍

scala中有些函数经常使用,在此做一下总结

2015/11/25 11:49
645
scala-协变、逆变、上界、下界

在看开源代码时,经常会遇到协变、逆变、上界、下界的概念,但是这几个概念又比较复杂,必须总结一下,方便下次查阅。

2015/11/20 07:46
5.9K
scala工具库

apache开源软件最火的应该是spark,没有之一。为了更好的掌握spark,scala应该是必须学习的,除了掌握基本语法,本文介绍scala的常用工具库。

2015/11/17 23:20
420

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部