- 链接地址：https://blog.csdn.net/yangqian1794/article/details/115707435
- 链接标题：hadoop03-mapreduce基础_mapreduce一个task一个进程吗-CSDN博客
- 所属网站：blog.csdn.net
- 被收藏次数：5691
文章浏览阅读67次。Mapreduce核心思想一个MapTask是一个进程，完全并行MR优缺点优点易于编写开发性能扩展性高，计算资源不够增加资源方便高容错，一台机器挂了，任务会被调配到另外的节点计算适合处理pb级离线数据缺点由于读写磁盘产生大量io开销，不擅长实时计算不擅长流式计算，数据如数据必须是批数据不擅长DAG计算，不能将一个计算结果快速传给下一个算子计算，难以实现spark那样的RDD串行计算MR进程MrAppMaster：负责计算过程调度MapTask：map阶段的数据处理R_mapreduce一个task一个进程吗
版权声明：本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除
