特牛网址导航

Apache Hive 集成Tez引擎_apache tez hive-CSDN博客

网友收藏
文章浏览阅读415次。Tez 简介Tez 是一个 Hive 的运行引擎,性能优于 MR。为什么优于 MR 呢?看下图。用 Hive 直接编写 MR 程序,假设有四个有依赖关系的 MR 作业,上图中,绿色是 Reduce Task,云状表示写屏蔽,需要将中间结果持久化写到 HDFS。Tez 可以将多个有依赖的作业转换为一个作业,这样只需写一次 HDFS,且中间节点较少,从而大大提升作业的计算性能。使用版本Hive: 2.3.1.hadoop: 2.7.6.Tez: 0.9.1.Java: 1.8前期准备.._apache tez hive
标签:apache tez hive