特牛网址导航

Spark学习-Yarn的两种提交模式_spark的yarn提交模式-CSDN博客

网友收藏
Yarn-cluster提交模式:用于生产环境,driver运行在nodemanager,没有单机网卡流量激增的问题。工作流程如下:1.spark-submit客户端发送请求到ResourceManager,请求启动Application。2.ResourceManager分配一批container在nodemanager上,启动ApplicationMaster(相当于Driver)。3.App..._spark的yarn提交模式