加载中
HIVE的安装

首先在vi /etc/profile 配置hive的环境变量, 这是hive的元数据存储在mysql中,机器中必须先装有mysql数据库。当然也可以不配置元数据在mysql中的啦。 1) 在mysql里创建hive用户,并赋予其足够...

2015/04/22 11:44
59
Hive技术文档

Hive是什么? Hive是蜂房的意思,为什么hadoop上的这层数据仓库叫Hive? 因为生物学上蜂房是一个结构相当精良的建筑,取名Hive足见则个数据仓库在数据存储上也是堪称精良的。Hive是Facebook开...

2015/08/06 19:37
397
HIVE与mysql的关系

Hive是一个基于Hadoop的数据仓库平台。通过hive,我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言:HQL,能 够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。 ...

2015/04/22 17:45
3.2K
HIVE 常见错误

参考之前的hive测试步骤一一执行。 hive> drop table sansom; FAILED: Error in metadata: org.apache.thrift.transport.TTransportException FAILED: Execution Error, return code 1 from ...

2015/08/05 10:34
112
Hive操作语句的使用

#创建表人信息表 person(String name,int age) hive> create table person(name STRING,age INT)ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ESCAPED BY '\\' STORED AS TEXTFILE; OK ...

2015/08/06 19:05
91
hive配置参数说明

hive.exec.mode.local.auto 决定 Hive 是否应该自动地根据输入文件大小,在本地运行(在GateWay运行) 默认值:true hive.exec.mode.local.auto.inputbytes.max 如果hive.exec.mode.local.au...

2015/04/22 17:44
100
Hive使用update&delete操作

1.修改配置(hive-site.xml)也可以直接加入hive开头给予变量 hive.support.concurrency = true hive.enforce.bucketing = true hive.exec.dynamic.partition.mode = nonstrict hive.txn.mana...

2016/08/17 10:39
5.4K
HBASE-HIVE集成

一、准备环境 前提条件已经安装好了hbase,hive 检测hive/lib目录下是否含有:hive-hbase-handler-版本.jar(通过此文件和hbase通信) 二、拷贝文件 进入hbase的lib目录下,拷贝如下文件到:h...

2015/07/06 17:28
107
通过hiveserver远程服务构建hive web查询分析工具

(1)hive 三种启动方式及用途,本文主要关注通过hiveserver(可jdbc连接)的方式启动 1, hive 命令行模式,直接输入/hive/bin/hive的执行程序,或者输入 hive --service cli 用于linux平台...

2015/04/22 11:56
3.5K
Hadoop2.2.0-HA高可用集群环境搭建

Hadoop2.2.0-HA高可用集群环境搭建 集群主机信息 主机名称 主机ip 配置 主要功能 master1 硬盘300G,内存32G,CPU8核 管理主节点 master2 硬盘300G,内存32G,CPU8核 管理备份节点 slave1 硬盘...

2015/09/15 11:07
551
sqoop数据迁移

1.Sqoop1与Sqoop2的优缺点 比较 Sqoop1 Sqoop2 架构 仅仅使用一个Sqoop客户端 引入了Sqoop server集中化管理connector,以及rest api,web,UI,并引入权限安全机制 部署 部署简单,安装需要...

2015/04/22 11:47
696
hadoop面试题20道

  1.简要的描述一下如何安装一个apache开原版的hadoop,无需列出完整步骤。   1.创建hadoop用户.   2.setup修改IP.   3.安装javaJdk,并且修改etc/profile文件,配置java的环境变量...

2016/03/02 11:27
317
初识Hadoop

要对Hadoop整体有一个概念,是解决什么问题的要有一个认识。 当一头牛拉不动一根木头的时候,为了解决这个问题,我们不会去培育更强更壮的牛。同样,我们也不需要尝试开发超级计算机,而应该...

2015/03/24 11:58
384
hadoop异常记录

下面遇到问题,提供了一些解决办法,希望有所帮助 1:Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out 这是reduce预处理阶段shuffle时获取已完成的map的输出失败次数超过上...

2015/05/16 11:42
390

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部