- 链接地址:https://tiger.blog.csdn.net/article/details/79288413
- 链接标题:MapReduce 工作机制详解(二)ReduceTask工作机制_reduce task-CSDN博客
- 所属网站:tiger.blog.csdn.net
- 被收藏次数:9762
ReduceTask 工作机制Reduce 大致分为 copy、sort、reduce 三个阶段,重点在前两个阶段。copy阶段包含一个 eventFetcher 来获取已完成的 map 列表,由 Fetcher 线程去 copy数据,在此过程中会启动两个 merge 线程,分别为 inMemoryMerger 和onDiskMerger,分别将内存中的数据 merge到磁盘和将磁盘中的数..._reduce task
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除
标签:reduce task