特牛网址导航

MapReduce 工作机制详解(二)ReduceTask工作机制_reduce task-CSDN博客

网友收藏
ReduceTask 工作机制Reduce 大致分为 copy、sort、reduce 三个阶段,重点在前两个阶段。copy阶段包含一个 eventFetcher 来获取已完成的 map 列表,由 Fetcher 线程去 copy数据,在此过程中会启动两个 merge 线程,分别为 inMemoryMerger 和onDiskMerger,分别将内存中的数据 merge到磁盘和将磁盘中的数..._reduce task
标签:reduce task