Spark on Yarn(二)_在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager-CSDN博客

网友收藏2024-01-24 04:51

链接地址：https://blog.csdn.net/qq_45769990/article/details/115982125
链接标题：Spark on Yarn(二)_在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager-CSDN博客
所属网站：blog.csdn.net
被收藏次数：3806

文章浏览阅读105次。所以Spark Application运行在YARN上时，采用不同DeployMode时架构不一样，企业实际生产环境还是以cluster模式为主，client模式用于开发测试，两者的区别面试中常问。 1）、Driver在任务提交的本地机器上运行，Driver启动后会和ResourceManager通讯申请启动 ApplicationMaster； 2）、随后ResourceManager分配Container，在合适的NodeManager上启动 ApplicationMaster._在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager上

本文地址：https://tebull.com/detail/539390.html

标签：在spark on yarn中如何让每一个executor尽可能的分布到每一个nodemanager上