加载中
hadoop&spark mapreduce对比 & 框架设计和理解

hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解...

非mapreduce生成Hfile,然后导入hbase当中

非mapreduce生成Hfile,然后导入hbase当中

spark implementation hadoop setup,cleanup

def main(args: Array[String]) { val sc = new SparkContext("local", "xxx") val inputData = sc.textFile("hdfs://master:8020/data/spark/user-history-data") val lines = inputData.ma...

2015/08/11 16:41
35
spark内核揭秘-01-spark内核核心术语解析

spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析...

spark总体概况

1. spark vs hadoop PS:Databricks团队特别说明,为了和Hadoop对比,这次用于排序的Spark集群没有使用它们的内存缓存机制,他们也是用硬盘存储的中间结果! http://tieba.yunxunmi.com/mtie...

Tachyon 0.7.1伪分布式集群安装与测试

Tachyon是一个高容错的分布式文件系统,允许文件以内存的速度在集群框架中进行可靠的共享,就像Spark和 MapReduce那样。通过利用信息继承,内存侵入,Tachyon获得了高性能。Tachyon工作集文件...

hive on spark 编译

前置条件说明 Hive on Spark是Hive跑在Spark上,用的是Spark执行引擎,而不是MapReduce,和Hive on Tez的道理一样。 从Hive 1.1版本开始,Hive on Spark已经成为Hive代码的一部分了,并且在s...

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部