特牛网址导航

记一次Hive 行转列 引起的GC overhead limit exceeded_hive 行转列后 gc overhead limit exceeded-CSDN博客

网友收藏
文章浏览阅读1.4k次。在一次hive语句进行行转列操作的时候,几千万的数据量发生了omm, GC overhead limit exceeded. 去网上查找了一下,判断是自己给map端和reduce端的内存太小了,才导致的omm,所以增加map端和reduce端的内存就好了.直接在客户端设置一下.hive> set mapreduce.map.memory.mb=2048;hive> set map..._hive 行转列后 gc overhead limit exceeded