加载中
MR程序Debug调式或者运行模式

MR程序Debug调式Windows或Linux环境配置相关操作以及问题或者称之为MR程序运行模式

2015/06/03 01:13
1.8K
模拟namenode崩溃,使用secondarynamenode恢复

模拟namenode崩溃,使用secondarynamenode恢复

2015/06/12 17:33
96
Storm集群的搭建与配置

Storm集群的搭建与配置

2015/06/12 22:13
179
Hadoop集群安全性:Hadoop中Namenode单点故障的解决方案及详介AvatarNode

基于hadoop 0.21.0的Avatar NameNode,以及hadoop2.0机制在此基础之上进行改良的HA机制

2015/06/08 18:32
170
五、Storm入门之Bolt

正如你已经看到的,bolts是一个Storm集群中的关键组件。你将在这一章学到bolt生命周期,一些bolt设计策略,以及几个有关这些内容的例子。 Bolt生命周期 Bolt是这样一种组件,它把元组作为输入...

2015/06/18 01:23
228
YARN集群工作机制

YARN是Hadoop2.0的一个全新的任务调度框架

三、Storm入门之Topology(拓扑结构)

在这一章,你将学到如何在同一个Storm拓扑结构内的不同组件之间传递元组,以及如何向一个运行中的Storm集群发布一个拓扑。 数据流组 设计一个拓扑时,你要做的最重要的事情之一就是定义如何在...

2015/06/17 23:52
155
一、初识Storm

初识Storm

2015/06/16 19:18
251
Hadoop集群三种作业调度算法介绍

Hadoop集群中有三种作业调度算法,分别为FIFO,公平调度算法和计算能力调度算法 先来先服务(FIFO) Hadoop中默认的调度器FIFO,它先按照作业的优先级高低,再按照到达时间的先后选择被执行的...

2015/06/08 19:20
213
DataNode没有启动的原因

DataNode没有启动或者新增DataNode所带来的版本ID不同的问题

2015/06/02 17:25
967
Hadoop安全机制介绍

Hadoop安全机制介绍

2015/06/13 21:41
279
二、Storm入门之Hello Storm(续)

上一页 package bolts;   import java.util.ArrayList; import java.util.List; import java.util.Map;   import backtype.storm.task.OutputCollector; import backtype.storm.task...

2015/06/16 19:57
274
hive优化之------控制hive任务中的map数和reduce数

控制hive任务中的map数,如何合并小文件,减少map数,如何适当的增加map数,控制hive任务的reduce数是本文的重点。

2015/06/08 16:06
127
二、Storm入门之Hello Storm

本章我们将会创建一个Storm工程和我们的第一个Storm topology。 提示:下述假设你已经安装JRE1.6或者更高级版本。推荐使用Oracle提供的JRE:http://www.java.com/downloads/. 操作模式 在开始...

2015/06/16 19:52
368
HBase数据管理/寻址机制以及行键设计

HBase数据管理机制、寻址机制、行键设计技巧、二级索引的解决方案

2015/06/11 14:59
654
Hive的使用

hive是一个基于hadoop平台的数据仓库工具,主要对海量数据进行统计分析

2015/06/08 01:03
716
Spark初探

1、Spark是什么? ○ 高可伸缩性 ○ 高容错 ○ 基于内存计算 2、Spark的生态体系(BDAS,中文:伯利克分析栈) ○ MapReduce属于Hadoop生态体系之一,Spark则属于BDAS生态体系之一 ○ Hadoop...

2015/06/20 16:04
1.2K
四、Storm入门之Spout

你将在本章了解到spout作为拓扑入口和它的容错机制相关的最常见的设计策略。

2015/06/17 23:41
95
六、Storm的高级原语之Transactional Topology

1、什么是Transactional Topology? ○ 是一个每个tuple仅被处理一次的框架 ○ 由Storm0.7引入,于Storm0.9被弃用,被triden取而代之 ○ 底层依靠spout\bolt\topology\stream抽象的一个特性 ...

2015/06/24 17:29
834

没有更多内容

加载失败,请刷新页面

返回顶部
顶部