文档章节

Hbase1.2.4 standlone模式安装以及基本概念

秋风醉了
 秋风醉了
发布于 2016/12/12 17:16
字数 1022
阅读 72
收藏 0

Hbase1.2.4 standlone模式安装以及基本概念

hbase standlone模式的安装


参考官方文档:http://hbase.apache.org/book.html#quickstart

新建hbase 目录,

➜  hbase pwd
/Users/xinxingegeya/IDE/hbase


然后把解压好的hbase 拷贝到当前的hbase目录下。

按照官方文档说明的,只需要如下配置,

   <property>
        <name>hbase.rootdir</name>
        <value>file:///Users/xinxingegeya/IDE/hbase/hbase</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/Users/xinxingegeya/IDE/hbase/zookeeper</value>
    </property>

注意这两个路径不必新建,会自动帮你建立。然后启动hbase。

➜  bin pwd
/Users/xinxingegeya/IDE/hbase/hbase-1.2.4/bin
➜  bin ./start-hbase.sh
starting master, logging to /Users/xinxingegeya/IDE/hbase/hbase-1.2.4/logs/hbase-xinxingegeya-master-Yale-Li.out
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0

 

hbase的基本概念

基本概念

Row key

行主键, HBase不支持条件查询和Order by等查询,读取记录只能按Row key(及其range)或全表扫描,因此Row key需要根据业务来设计以利用其存储排序特性(Table按Row key字典序排序如1,10,100,11,2)提高性能。

=====
Column Family(列族)

在表创建时声明,每个Column Family为一个存储单元。

=====
Column(列)

HBase的每个列都属于一个列族,以列族名为前缀,如列article:title和article:content属于article列族,author:name和author:nickname属于author列族。

Column不用创建表时定义即可以动态新增,同一Column Family的Columns会群聚在一个存储单元上,并依Column key排序,因此设计时应将具有相同I/O特性的Column设计在一个Column Family上以提高性能。

=====
Timestamp

HBase通过row和column确定一份数据,这份数据的值可能有多个版本,不同版本的值按照时间倒序排序,即最新的数据排在最前面,查询时默认返回最新版本。Timestamp默认为系统当前时间(精确到毫秒),也可以在写入数据时指定该值。

=====
Value

每个值通过4个键唯一索引,TableName+RowKey+ColumnKey+Timestamp=>value

=====
存储类型

TableName 是字符串
RowKey 和 ColumnName 是二进制值(Java 类型 byte[])
Timestamp 是一个 64 位整数(Java 类型 long)
value 是一个字节数组(Java类型 byte[])。

 

下面就用实例来说明一下上面的概念。

建表语句

hbase(main):003:0* create 'test', 'cf'
0 row(s) in 1.5090 seconds

=> Hbase::Table - test

test为表名,cf的列簇的名字。建表的时候必须指定表名和列簇的名字,可以有多个列簇。

插入数据语句,

hbase(main):005:0> put 'test','row1','cf:a','value1'
0 row(s) in 0.2070 seconds
hbase(main):009:0* put 'test','row2','cf:b','value2'
0 row(s) in 0.0040 seconds
hbase(main):010:0> put 'test','row3','cf:c','value3'
0 row(s) in 0.0090 seconds

上面的几个数据依次是:表名,row key ,列簇:列名,值。

其中,cf:a , cf:b , cf:c 表示a , b , c三列都属于同一个列簇cf,但是是不同的三列,列的名字分别为 a , b , c。

scan 和 get 查询命令

hbase(main):012:0> scan 'test'
ROW                                                                   COLUMN+CELL
 row1                                                                 column=cf:a, timestamp=1481531060401, value=value1
 row2                                                                 column=cf:b, timestamp=1481531083332, value=value2
 row3                                                                 column=cf:c, timestamp=1481531091578, value=value3
3 row(s) in 0.0280 seconds

hbase(main):013:0> get 'test','row1'
COLUMN                                                                CELL
 cf:a                                                                 timestamp=1481531060401, value=value1
1 row(s) in 0.0640 seconds

get命令 的参数为 表名和row key。

 

列簇和列的关系如下图所示,

每个列簇可以有不同的列。可以动态的增加列簇。

hbase(main):018:0> describe 'test'
Table test is ENABLED
test
COLUMN FAMILIES DESCRIPTION
{NAME => 'cf', BLOOMFILTER => 'ROW', VERSIONS => '1', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE', TTL => 'FOREVER', COMPRESSION => 'NONE', MIN_VERSIONS => '0', BLOCKCACHE => 'true', BLOCKSIZE => '65536', REPLICATION_SCOPE => '0'}
1 row(s) in 0.1710 seconds

hbase(main):019:0> alter 'test' , NAME => 'cf2'
Updating all regions with the new schema...
1/1 regions updated.
Done.
0 row(s) in 2.0880 seconds

hbase(main):020:0> describe 'test'
Table test is ENABLED
test
COLUMN FAMILIES DESCRIPTION
{NAME => 'cf', BLOOMFILTER => 'ROW', VERSIONS => '1', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE', TTL => 'FOREVER', COMPRESSION => 'NONE', MIN_VERSIONS => '0', BLOCKCACHE => 'true', BLOCKSIZE => '65536', REPLICATION_SCOPE => '0'}
{NAME => 'cf2', BLOOMFILTER => 'ROW', VERSIONS => '1', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE', TTL => 'FOREVER', COMPRESSION => 'NONE', MIN_VERSIONS => '0', BLOCKCACHE => 'true', BLOCKSIZE => '65536', REPLICATION_SCOPE => '0'}
2 row(s) in 0.0990 seconds

现在就有了两个列簇,cf 和 cf2 。

=======END=======

© 著作权归作者所有

共有 人打赏支持
上一篇: Go bytes包
下一篇: Go TCP Socket编程
秋风醉了
粉丝 239
博文 572
码字总数 416654
作品 0
朝阳
程序员
私信 提问
11 个处理触摸事件和多点触摸的 JS 库

触摸屏是现在所有智能手机的标配,还包括各种平板设备,而且很多桌面也慢慢在开始支持触摸操作。要开发支持触摸屏设备的 Web 应用,我们需要借助浏览器的触摸事件来实线。 下图是各种触摸事件...

oschina
2012/06/12
13K
11
ubuntu12.04 美化eclipse

最终效果,这是非全屏模式下的抓图(如果全屏模式Alt+F11打开后,最上面没用的标题栏也会被隐藏,从而使可编辑区域最大化!) 1。安装theme插件 从Marketplace搜索Eclipse Color Theme并安装 ...

cyper
2015/02/03
0
0
【Hadoop】hadoop 2.7.3上 安装Hbase1.2.4

原创文章,转载请标注来自http://blog.csdn.net/lsttoy/article/details/53406840。 首先,去apache看官方的支持版本 可以看到hadoop2.4.X以后的版本基本都支持hbase1.2.4。 接下来开始安装。...

lsttoy
2016/11/30
0
0
hbase1.2.4安装

匹配的hadoop2.6.0,假设hadoop已经正确安装并启动,假设zookeeper已经正确安装并启动。 下载hbase cd到安装目录时,编辑hbase-env.sh,放开如下配置,设置为false表示使用外部zookeeper集群...

尚浩宇
2016/11/17
125
0
CentOS 7下安装集群HBase1.2.4

本文是继续前两篇博文: 【CentOS 7下安装Hadoop-2.7.3】https://my.oschina.net/xhhuang/blog/807914 【CentOS 7下安装Zookeeper-3.4.9】https://my.oschina.net/xhhuang/blog/808600 的工作......

xhHuang
2016/12/20
1K
2

没有更多内容

加载失败,请刷新页面

加载更多

js垃圾回收机制和引起内存泄漏的操作

JS的垃圾回收机制了解吗? Js具有自动垃圾回收机制。垃圾收集器会按照固定的时间间隔周期性的执行。 JS中最常见的垃圾回收方式是标记清除。 工作原理:是当变量进入环境时,将这个变量标记为“...

Jack088
昨天
17
0
大数据教程(10.1)倒排索引建立

前面博主介绍了sql中join功能的大数据实现,本节将继续为小伙伴们分享倒排索引的建立。 一、需求 在很多项目中,我们需要对我们的文档建立索引(如:论坛帖子);我们需要记录某个词在各个文...

em_aaron
昨天
25
0
"errcode": 41001, "errmsg": "access_token missing hint: [w.ILza05728877!]"

Postman获取微信小程序码的时候报错, errcode: 41001, errmsg: access_token missing hint 查看小程序开发api指南,原来access_token是直接当作parameter的(写在url之后),scene参数一定要...

两广总督bogang
昨天
31
0
MYSQL索引

索引的作用 索引类似书籍目录,查找数据,先查找目录,定位页码 性能影响 索引能大大减少查询数据时需要扫描的数据量,提高查询速度, 避免排序和使用临时表 将随机I/O变顺序I/O 降低写速度,占用磁...

关元
昨天
13
0
撬动世界的支点——《引爆点》读书笔记2900字优秀范文

撬动世界的支点——《引爆点》读书笔记2900字优秀范文: 作者:挽弓如月。因为加入火种协会的读书活动,最近我连续阅读了两本论述流行的大作,格拉德威尔的《引爆点》和乔纳伯杰的《疯传》。...

原创小博客
昨天
35
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部