加载中
Hadoop中DataNode的启动过程详解

本文的目的在于详细记录2.4.1版本下hadoop的DataNode的启动过程,作此记录,也为以后回过头看DataNode留下方便。本文的思路是结合DataNode的代码,来分析他的启动过程。 说明,限于篇幅,对文...

HDFS Federation设计动机与基本原理

HDFS Federation是Hadoop最新发布版本Hadoop-0.23.0中为解决HDFS单点故障而提出的namenode水平扩展方案。该方案允许HDFS创建多个namespace以提高集群的扩展性和隔离性。本篇文章主要介绍了H...

hadoop rpc服务端初始化和调用过程详解

本文主要描述了hadoop rpc服务端的初始化和调用过程,相比客户端的初始化,rpc服务端感觉会简单点,但是调用过程却比客户端复杂一些。本文还是以namenode为例,namenode会在执行main方法的时...

hadoop rpc客户端初始化和调用过程详解

本文主要记录hadoop rpc的客户端部分的初始化和调用的过程,下面的介绍中主要通过DFSClient来说明,为什么用DFSClient呢?DFSClient作为namenode的客户端,通过rpc来操作hdfs。限于篇幅,本文...

磁盘读写与数据库的关系

一 磁盘物理结构 (1) 盘片:硬盘的盘体由多个盘片叠在一起构成。 在硬盘出厂时,由硬盘生产商完成了低级格式化(物理格式化),作用是将空白的盘片(Platter)划分为一个个同圆心、不同半径的磁道...

2015/01/23 11:39
135
硬盘的读写原理

硬盘的种类主要是SCSI 、IDE 、以及现在流行的SATA等;任何一种硬盘的生产都要一定的标准;随着相应的标准的升级,硬盘生产技术也在升级;比如 SCSI标准已经经历了SCSI-1 、SCSI-2、SCSI-3;...

2015/01/23 11:13
392
使用sh -x调试shell脚本

通过 1.加入echo或者使用 2.-x选项,轻松跟踪调试shell脚本

2015/01/22 18:01
255
HBase Flush操作流程以及对读写服务的影响

HBase的Flush操作的触发条件: 1)Manual调用,HRegionInterface#flushRegion,可以被用户态org.apache.hadoop.hbase.client.HBaseAdmin调用flush操作实现,该操作会直接触发HRegion的interna...

2015/01/14 12:27
289
IBM会话设置和覆盖规则

中文版地址:http://www-01.ibm.com/support/docview.wss?uid=swg21659740 Technote (troubleshooting) Problem(Abstract) It is possible to set the HTTP Session time-out in various pla...

五大主流数据库模型

导读:无论是关系型数据库还是非关系型数据库,都是某种数据模型的实现。本文将为大家简要介绍5种常见的数据模型,让我们来追本溯源,窥探现在流行的数据库解决方案背后的神秘世界。 什么是数...

关于HFile的存储结构梳理以及快速定位rowkey

一、HFile结构介绍 为了支持数据的随机查询,HFile结构分为六个部分: 1、数据块–保存表中的数据,每一个数据块由块头和一些keyValue(record)组成,key的值是严格按照顺序存储的。块大小默认...

2015/01/07 12:23
1K
Apache遇到的问题:APR not found

#./configure --prefix……检查编辑环境时出现: checking for APR... no configure: error: APR not found . Please read the documentation. 可以用./configure –help | grep apr 查看帮助...

2015/01/06 20:47
234
YUM命令安装包的安装路径查看

YUM命令安装包的安装路径查看 最近使用Amazon 的 EC2, 使用yum 安装了tomcat,安装后就两眼一黑,找不到安装路径了。 后来得到高人指点。 www.2cto.com 使用如下命令,就可以清晰的找到 to...

2015/01/06 19:46
222
hbase0.98.9中实现endpoints

在我的前面一篇博客中,抄录了hbase官网的一段话,讲的是0.96.0以后版本中endpoint的实现机制由于引进了protobuf框架,有了比较彻底的改变。本文承接上面一篇博客,给出定制一个endpoint的过...

2015/01/04 19:40
306
The implementation for endpoints in HBase 0.96.x

The implementation for endpoints changed significantly in HBase 0.96.x due to the introduction of protocol buffers (protobufs) (HBASE-5488). If you created endpoints before 0.96...

HBase Shell Commands

HBase shell commands are mainly categorized into 6 parts: General HBase Shell Commands status Show cluster status. Can be ‘summary’, ‘simple’, or ‘detailed’. The default i...

2015/01/03 16:54
305
【甘道夫】HBase基本数据操作详解【完整版,绝对精品】

引言 之前详细写了一篇HBase过滤器的文章,今天把基础的表和数据相关操作补上。 本文档 参考最新 (截止2014年7月16日)的 官方 Ref Guide、 Developer API编写 。 所有代码均基于“hbase 0...

2015/01/02 08:52
300

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部