特牛生活网

Hive的Fetch抓取---为什么hive中执行select,filter,limit不走mapreduce?_limit函数hive执不执行mapreduc-CSDN博客

网友收藏
文章浏览阅读471次。Fetch抓取是指,Hive中对某些情况的查询可以不必使用MapReduce计算。例如:SELECT * FROM emp;在这种情况下,Hive可以简单地读取emp对应的存储目录下的文件,然后输出查询结果到控制台。在hive-default.xml.template文件中hive.fetch.task.conversion默认是more,老版本hive默认是minimal,该属性修改为more以后,在全局查找、字段查找、limit查找等都不走mapreduce。案例实操:(1)把hive._limit函数hive执不执行mapreduc