SpatialHadoop实例:面向空间数据的高效MapReduce框架

作者:Ahmed Eldawy;Mohamed F.Mokbel 摘要:本文实例介绍了SpatialHadoop平台,它是第一 个基于成熟MapReduce对空间数据具有原生支持的框架。SpatialHadoop是对Hadoop的做了一个全面的扩展...

空间数据下载-资源列表

这里列出一些时空大数据研究可用的一些空间数据资源下载链接。因为各种原因,可能无法访问,可以联系我进行修正,各位朋友一起寻找解决办法。

R语言知识体系概览

现代的计算机“语言”,已经远远超越了机器编译、人机对话这些传统计算机科学的范畴,而是与世界交流的一种思维方式。这里介绍R语言的涉及到的内容,可谓博大精深。

使用Mesos和Marathon管理Docker集群

Apache Mesos能够在同样的集群机器上运行多种分布式系统类型,更加动态有效率低共享资源。提供失败侦测,任务发布,任务跟踪,任务监控,低层次资源管理和细 粒度的资源共享,可以扩展伸缩到...

Mesos在去哪儿网的应用

Mesos在Qunar DevOps团队内部的应用。 平台介绍 我们是在今年的5月份开始调研并尝试使用Mesos,第一个试点就是我们的日志平台,我们将日志分析全部托管在Mesos平台上。日志平台面向业务线开发...

数据科学中最好的5个机器学习API

原文 http://www.infoq.com/cn/news/2015/12/5-best-ml-api-to-use 机器学习作为大数据的前沿无疑是让人生畏的,因为只有技术极客和数据科学领域的专家才能驾驭机器学习算法和技术,对于大部...

为什么私有云的定位应该是PaaS,而不是IaaS?

开发者再也不问你要服务器了。他们甚至不问你要一个LAMP套件(stack)。他们想要API。 — Mårten Mickos (@martenmickos)

Mesos vs OpenStack,谁才是私有云的未来?

来自Mesosphere以及Rackspace的专家们从 OpenStack与Mesos的功能和产品定位上对这个问题进行了解读,它们之间的关系并非互相替代,而是各有侧重,相辅相成,这取决于用户的实际需 求。希望本...

Mesos框架对比:Marathon 和 Aurora

Marathon 和 Aurora 都能在 Mesos 集群上调度和运行常驻服务。本文比较了两个框架的不同和优劣。 问题 Marathon 框架和 Aurora 框架都能在 Mesos 集群上调度和运行常驻服务。我的问题是: 两...

Singularity:基于Mesos的服务部署和作业调度平台

Singularity是一个在云基础设施中部署和运行服务和计划作业的平台,同时也是HubSpot PaaS的核心组件。它能够高效地管理底层进程的生命周期,并有效地利用集群资源。它可以作为持续部署基础设...

在生产环境中使用Apache Mesos和Docker

通过Docker/Nginx/Mesos构建网络服务系统的架构,已经不少的应用开始采用此架构。这里做一简单的介绍,目前Nginx是非常稳定、成熟、高效的系统,但Docker/Mesos之类还在快速发展之中,使用中...

Hadoop安装与配置

本Hadoop安装教程为简略版本,包含伪分布式和集群的配置,只列出命令与配置,不作详细说明,方便有基础的读者。完整版请浏览Hadoop安装配置教程_伪分布式,以及Hadoop集群安装配置教程。 本教...

Hadoop 2.7.1的源码编译

Compile Hadoop from Source Compile Hadoop 2.x help you fix error Unable to load native-hadoop library Install Requirements Java Oracle: otherwise, while maven build you may be o...

Spark的源码编译

Spark是一个快速发展的用于大量数据处理的分布式系统,这里介绍其源码编译方法。英文好的直接看Spark的版本下载和源码编译方法的官方地址:http://spark.apache.org/downloads.html,最新的信...

hadoop2.7环境的编译安装

海外找回来的的资料,珍惜吧!BD TMD的搜不到,搜到的很多细节漏掉了,总是出错,而且版本很旧,都是1.X的。这里介绍的是目前最新的Hadoop版本2.7.1,但因为还在开发中,应该还不是很稳定,需...

Spark源码编译和问题的解决

对源码进行编译虽然有点自虐,但可以帮助自己更好地了解其中的细节,为以后的深入和解决配置问题打下基础,否则遇到问题可能会束手无策。这里介绍Spark的编译过程[来自于:http://www.iteb...

R的编码风格指南

概要: R编码风格约定 1. 文件命名: 以.R(大写)结尾 2. 标识符命名: variable.name, FunctionName, kConstantName 3. 单行长度: 不超过80个字符 4. 缩进: 两个空格, 不使用制表符 5. 空白 6....

使用RStudio创建自己的Packages实现复用

一些频繁使用的R代码,可以创建为packages,进行复用提高效率,也可以方便地贡献给社区。这里介绍使用RStudio创建packacges的方法。

R语言-命令行参数的使用

R命令行执行引擎可以传入外部参数,这里做了一个实验,可以照猫画虎。通过这种方式,可以很容易地把R和Shell脚本或者Python脚本混合起来使用,功能是极其强大的!

没有更多内容

加载失败,请刷新页面