hiveSql常见错误记录

1. In strict mode, if ORDER BY is specified, LIMIT must also be specified.

这个错误提示是因为在hive下写的sql使用了order by对数据进行数据排序，因为order by事实上是全局排序，因此，在reduce阶段仅为一个reduce做汇总，为此，数据量庞大，在hive的严格模式下禁止全局排序的。

两种解决方案

更改hive严格模式设定set hive.mapred.mode = nonstrict
SQL末尾增加limit限定

转载于:https://www.cnblogs.com/Sinkinghost/p/9842864.html

hiveSql常见错误记录相关推荐

Linux系统日检常见问题,linux系统维护常见错误记录
linux系统维护常见错误记录发布时间:2008-09-17 21:32:34 作者:佚名我要评论一:卸载的时候出现的错误: umount /dev/nb1 device is busy ...
idea中push到github或gitee过程中的常见错误记录
刚用git进行版本控制不久,过程中遇到了很多很多问题,之前一直使用svn,git支持分布式版本管理,在你自己本地上,也会有版本更新的记录.使用svn时,必须要保持网络畅通,所有的版本记录是记录在中央服 ...
Javah 常见错误记录
2019独角兽企业重金招聘Python工程师标准>>> 测试文件:hello-jni/src/com/example/hellojni/HelloJni.java /*** 该文件来 ...
安卓编程常见错误记录
错误1:Eclipse无法打开"Failed to load the JNI shared library" 解决方法:以前是装JDK1.7的,改为重新安装旧点版本的 JDK1.6 ...
DataStage常见错误记录
Ora-01427: 单个子查询返回多个行:select语句下面嵌套的select语句查询结果大于一行. 解决方法:将嵌套查询语句加上where rownum=1,附录有去重语句. ora-01461 ...
vs2010常见错误记录
(1)在Debug模式下正常,在Release模式下程序出现异常可能原因:配置的链接dll有问题,后缀带d和不带d混淆:在Release模式下类中的变量不会自动进行初始化,需要手动初始化:
1.2 cuda相关常见错误记录(不断更新)
1. libcudnn.so.x: file too short 解决办法: 删除软连接后重新建立新的软连接: # 到cuda目录 # x为cuda版本 # 0.21 是文件的小版本号,可以在文件夹内 ...
TensorFlow常见错误记录
1.No module named 'tensorflow.example from tensorflow.examples.tutorials.mnist import input_data Mod ...
Python常见问题解决记录1－Non-ASCII character ‘\xe7‘错误
Python常见问题解决记录1-Non-ASCII character '\xe7'错误参考文章: (1)Python常见问题解决记录1-Non-ASCII character '\xe7'错误 ( ...

hiveSql常见错误记录

1. In strict mode, if ORDER BY is specified, LIMIT must also be specified.

hiveSql常见错误记录相关推荐

最新文章

热门文章