- 链接地址:https://blog.csdn.net/luyllyl/article/details/80406946
- 链接标题:spark-core_20: MapOutputTrackerMaster、MapOutputTracker、MapOutputTrackerMasterEndpoint等源码分析-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:2798
文章浏览阅读2.3k次。1,在SparkEnv.create()初始化了MapOutputTrackerMaster(记录ShuffleMapTask输出信息)val mapOutputTracker = if (isDriver) { /* MapOutputTrackerMaster属于driver,这里使用TimeStampedHashMap来跟踪 map的输出信息,也可以将旧信息进行清除 * 一、MapO..._mapoutputtrackermasterendpoint
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除