各种大数据相关资源整理

$$x\in { R }^{ { x }_{ n } }$$

spark streaming如何保证数据不丢失，并且保证exactly-once。

正如你所知，spark实现了多种shuffle方法，通过 spark.shuffle.manager来确定。暂时总共有三种：hash shuffle、sort shuffle和tungsten-sort shuffle，从1.2.0开始默认为sort shuffle。本节主...

正如你所知，spark实现了多种shuffle方法，通过 spark.shuffle.manager来确定。暂时总共有三种：hash shuffle、sort shuffle和tungsten-sort shuffle，从1.2.0开始默认为sort shuffle。本节主...

正如你所知，spark实现了多种shuffle方法，通过 spark.shuffle.manager来确定。暂时总共有三种：hash shuffle、sort shuffle和tungsten-sort shuffle，从1.2.0开始默认为sort shuffle。本节主...

原文地址：(spark-knowledge系列)[https://github.com/jacksu/utils4s/tree/master/spark-knowledge] spark进程是以JVM进程运行的，可以通过-Xmx和-Xms配置堆栈大小，它是如何使用堆栈呢？下...

欢迎大家关注： scala工具库 ,里面包含各种库的测试用例和使用说明文档

scala中有些函数经常使用，在此做一下总结

在看开源代码时，经常会遇到协变、逆变、上界、下界的概念，但是这几个概念又比较复杂，必须总结一下，方便下次查阅。

apache开源软件最火的应该是spark，没有之一。为了更好的掌握spark，scala应该是必须学习的，除了掌握基本语法，本文介绍scala的常用工具库。