文档章节

hive on tez map join bug

肥皂泡2
 肥皂泡2
发布于 2018/12/01 23:11
字数 147
阅读 620
收藏 0

3 月,跳不动了?>>>

现象:

   一个hive SQL:在 root.queue1 和 root.queue2 执行出来的结果不一样 。

   select count(clue_id),count(distinct clue_id) from xxx1 left join xxx2

原因:

   hive 默认开启了 map join 优化,这个优化有时会出现一些bug(具体什么情况,没搞懂,反正就是莫名奇妙的bug) 

解决: 关闭map join 优化。

   set hive.auto.convert.join=false;

https://www.cnblogs.com/MOBIN/p/5702580.html

© 著作权归作者所有

上一篇: hive 执行SQL异常
下一篇: top命令
肥皂泡2

肥皂泡2

粉丝 67
博文 161
码字总数 30609
作品 0
昌平
程序员
私信 提问
加载中

评论(0)

CDH6.0.1集成tez-0.9.1计算引擎

参考文章: https://www.jianshu.com/p/9fb9f32e1f0f https://www.baidu.com/link?url=OgpwasnZi7H1dySN2T111sseEWDBaCCTC3DFV61G7756YbrkJCA8Y3UFaueyqnfN&wd=&eqid=daeb8b3500049cf3000000......

Sheav
2019/09/19
108
0
Hive JDBC连接Tez(AM)容器长期不释放问题的解决方法

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/bluishglc/article/details/86703939 Hive JDBC连接Tez(AM)容器长期不释放问题的解决方法 问题 有这样一个问...

bluishglc
2019/01/30
0
0
Hive运行Tez引擎任务出现always pending

问题描述 在Hive中使用Tez计算引擎执行SQL任务时,Map和Reduce都处于Pending状态。 解决思路 查看任务的ApplicationMaster的container日志如下: Hive执行Tez引擎任务中Cpu资源设置涉及到的主...

Yulong_
2016/09/21
707
0
Apache Hive 2.1.1 发布,数据仓库平台

数据仓库平台 Apache Hive 2.1.1 发布了。本次部分更新如下: Sub-task [HIVE-13409] - Fix JDK8 test failures related to COLUMN_STATS_ACCURATE [HIVE-13549] - Remove jdk version spec......

局长
2016/12/09
1.6K
1
提升小规模HDP集群的作业并行度

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/bluishglc/article/details/86707084 对于团队使用的一些小型的Hadoop集群来说,由于资源有限,团队成员又多,...

bluishglc
2019/01/30
0
0

没有更多内容

加载失败,请刷新页面

加载更多

电脑录屏软件哪个好?轻松搞定屏幕录制的技巧

电脑录屏软件哪个好?在网上能找到不少有关电脑录屏的软件,且质量上也是参差不齐的。使用录屏工具时由于不知道录屏软件哪个好在录制视频经常会遇到各式各样的问题,不是录制后视频出现卡顿就...

cenfeng123
25分钟前
24
0
适用于Mac电脑的Python开发工具哪款好用?

适用于Mac电脑的Python开发工具哪款好用?WingPro 7 Mac版好用吗?wingpro mac破解版是一款跨平台 Python IDE 系列通过强大的集成编辑,调试,单元测试和项目管理功能,使Python开发变得更加...

mac小叮当
26分钟前
13
0
对于产品开发而言一些想法。

如果你在做一个产品,那么就尽量把这个产品打磨的用心些,除非只是给你自己用的工具,不会去出售或者提供服务的。 因为你前期如果不花时间去琢磨这些事情,那么后面产品不断的出现问题,所花...

开源中国最牛的人
28分钟前
32
0
电子音乐与传统音乐的区别

音乐有着悠久的历史,但电子音乐是随着现代科技发展而发展起来的,电子音乐是音乐创作结合计算机的技术,形成在计算机平台上发展的新音乐形式。这种音乐形式不是以传统的乐器为创作工具,而是...

奇亿音乐
34分钟前
20
0
Oracle创建设置查询权限用户

--普通用户test,需要创建查询用户(cxtest),授权test的部分表或试图查询权限 -- 使用 SYSTEM创建用户 create user cxtest  identified by cxtest  default tablespace USERS  te...

wzb88
38分钟前
12
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部