- 链接地址:https://blog.csdn.net/iteye_20478/article/details/82196802
- 链接标题:Hadoop运行流程分析-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:175
1. 概述Hadoop MapReduce基于“分而治之”的思想,将计算任务抽象成map和reduce两个计算过程,计算流程如下:map过程包括:1). 从磁盘读入数据2). 运行map任务3). 写结果到磁盘reduce过程包括:1). shuffle&sort2). 运行reduce任务3). 写结果到磁盘2. 分析在map的第三个阶段,map任..._hadoop运行流程
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除
标签:hadoop运行流程