- 链接地址:https://blog.csdn.net/a904364908/article/details/103225504
- 链接标题:记一次Hive 行转列 引起的GC overhead limit exceeded_hive 行转列后 gc overhead limit exceeded-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:1552
文章浏览阅读1.4k次。在一次hive语句进行行转列操作的时候,几千万的数据量发生了omm, GC overhead limit exceeded. 去网上查找了一下,判断是自己给map端和reduce端的内存太小了,才导致的omm,所以增加map端和reduce端的内存就好了.直接在客户端设置一下.hive> set mapreduce.map.memory.mb=2048;hive> set map..._hive 行转列后 gc overhead limit exceeded
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除