Hadoop-MapReduce+Yarn核心原理_mpreduce+yarn-CSDN博客

网友收藏2024-01-23 15:23

链接地址：https://blog.csdn.net/dgssd/article/details/109509617
链接标题：Hadoop-MapReduce+Yarn核心原理_mpreduce+yarn-CSDN博客
所属网站：blog.csdn.net
被收藏次数：6530

文章浏览阅读136次。1. MapReduce核心：Hadoop体系下一个编程模型（计算框架），主要是用来操作HDFS中存储数据并对HDFS中数据进行计算2. Map+ReduceMap：用来对局部数据进行运算局部运算Reduce：对局部运算的结果做汇总运算汇总运算3. Yarn（统一资源调度器，任务资源管理器）a. 整合hadoop集群中资源（CPU，内存）进行统一调度。比如：12核，1234G;监控map和reduce的执行情况b. Yarn=Resoucer_mpreduce+yarn

本文地址：https://tebull.com/detail/516971.html

标签：mpreduce+yarn