MapReduce原理_reduce的并行度不手动指定的默认计算方式-CSDN博客

网友收藏2024-01-25 06:48

链接地址：https://blog.csdn.net/weixin_50337833/article/details/117879202
链接标题：MapReduce原理_reduce的并行度不手动指定的默认计算方式-CSDN博客
所属网站：blog.csdn.net
被收藏次数：4831

文章浏览阅读354次。一、为啥叫MapReduce首先解释为啥叫MapReduce，MapReduce名字的起源可以追溯到谷歌2004年的一篇论文《MapReduce:Simplified Data Processing on Large Clusters》，论文题目就是MapReduce，而在Hadoop中连名字都没有修改。1、Map：以一条记录为单位做映射。映射、变换、过滤；1 进N 出2、Reduce：以一组为单位做计算。分解、缩小、归纳；1 组进N 出二、MapReduce的原理上图左边即是Map的过程，右_reduce的并行度不手动指定的默认计算方式

本文地址：https://tebull.com/detail/580319.html

标签：reduce的并行度不手动指定的默认计算方式