文档章节

搭建HIVE数据仓库遇到的乱码问题

小萝卜_
 小萝卜_
发布于 2016/04/26 18:14
字数 291
阅读 142
收藏 2

在搭建数据仓库完成后,desc 表名 字段描述乱码,这个是不能容忍的

1) 

mysql 字符集修改:

找到/etc/my.cnf文件(如果没有该文件,cp /usr/share/mysql/my-medium.cnf /etc/my.cnf)

[client] 下面增加:
default-character-set = utf8
[mysqld]下面增加:
character-set-server = utf8

[mysql] 下面增加:
default-character-set = utf8
 

重启mysql库  service mysql restart

2) 

修改hive-metastore-0.14.0.jar中的package.jdo文件,将index和pk字段的长度大于255的字段定义都改小,缩小3倍。比如原文件定义的是256,那么改成85。

把修改好的jar包替换掉HIVE_HOME/lib目录下

如果之前有建立过hive仓库,执行3)、4)步,如果没有可以不用做

3)删除mysql中的hive元数据库,drop database hive

4)删除hdfs上的hive数据仓库的目录

重新执行hive命令,建库,建表后,desc如果下图:

© 著作权归作者所有

小萝卜_
粉丝 15
博文 67
码字总数 25812
作品 0
东城
程序员
私信 提问
大数据经典学习路线(及供参考)之 一

1.Linux基础和分布式集群技术 学完此阶段可掌握的核心能力: 熟练使用Linux,熟练安装Linux上的软件,了解熟悉负载均衡、高可靠等集群相关概念,搭建互联网高并发、高可靠的服务架构; 学完此...

柯西带你学编程
2018/05/22
0
0
编译hive2.3.2源码并搭建环境

1. 安装环境说明 (1)hive1.2之后需要java1.7或者更高的版本,建议用1.8; (2)hadoop版本2.x以上,hive2.0.0之后不再支持1.x; 在本文之前,hadoop环境已经安装,具体可见文章《编译hadoo...

土木匠
2017/12/09
0
0
大话大数据(一)

大数据的4V特征: 数据量大,TB->PB 数据类型繁多,结构化、非结构化文本、日志、视频、图片、地理位置等; 商业价值高,但是这种价值需要在海量数据之上,通过数据分析与机器学习更快速的挖...

提广乾
2016/11/25
17
0
循序渐进,了解Hive是什么!

一直想抽个时间整理下最近的所学,断断续续接触hive也有半个多月了,大体上了解了很多Hive相关的知识。那么,一般对陌生事物的认知都会经历下面几个阶段: 为什么会出现?解决了什么问题? ...

青夜之衫
2017/12/05
0
0
配置Hive

Hive是基于Hadoop构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据。其在Hadoop的架构体系中承担了一个SQL解析的过程,它提供了对外的入口...

phacks
2016/09/11
14
0

没有更多内容

加载失败,请刷新页面

加载更多

android6.0源码分析之Camera API2.0下的Preview(预览)流程分析

本文将基于android6.0的源码,对Camera API2.0下Camera的preview的流程进行分析。在文章android6.0源码分析之Camera API2.0下的初始化流程分析中,已经对Camera2内置应用的Open即初始化流程进...

天王盖地虎626
34分钟前
2
0
java 序列化和反序列化

1. 概述 序列恢复为Java对象的过程。 对象的序列化主要有两 首先我们介绍下序列化和反序列化的概念: 序列化:把Java对象转换为字节序列的过程。 反序列化:把字节序列恢复为Java对象的过程。...

edison_kwok
46分钟前
1
0
分布式数据一致性

狼王黄师傅
今天
2
0
经验

相信每位开发者在自己开发的过程中,都会反思一些问题,比如怎样提高编程能力、如何保持心态不砍产品经理、996 之后怎样恢复精力……最近开发者 Tomasz Łakomy 将他 7 年的开发生涯中学习到...

WinkJie
今天
4
0
从源码的角度来看SpringMVC

SpringMVC核心流程图 简单总结 首先请求进入DispatcherServlet 由DispatcherServlet 从HandlerMappings中提取对应的Handler 此时只是获取到了对应的Handle,然后得去寻找对应的适配器,即:H...

骚年锦时
今天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部