hiveSql常见错误记录
生活随笔
收集整理的这篇文章主要介绍了
hiveSql常见错误记录
小编觉得挺不错的,现在分享给大家,帮大家做个参考.
1. In strict mode, if ORDER BY is specified, LIMIT must also be specified.
这个错误提示是因为在hive下写的sql使用了order by对数据进行数据排序,因为order by事实上是全局排序,因此,在reduce阶段仅为一个reduce做汇总,为此,数据量庞大,在hive的严格模式下禁止全局排序的。
两种解决方案
- 更改hive严格模式设定set hive.mapred.mode = nonstrict
- SQL末尾增加limit限定
转载于:https://www.cnblogs.com/Sinkinghost/p/9842864.html
总结
以上是生活随笔为你收集整理的hiveSql常见错误记录的全部内容,希望文章能够帮你解决所遇到的问题。
- 上一篇: 如何避免家庭火灾中的烟雾中毒?
- 下一篇: 个人介绍