特牛生活网

Spark on YARN的两种模式:YARN-Client,YARN-Cluster_spark的yarn模式-CSDN博客

网友收藏
文章浏览阅读2.1k次。Spark on YARN模式根据Driver在集群中的位置分为两种模式:YARN-Client模式;YARN-Cluster(或称为YARN-Standalone模式)一、【YARN-client】Spark Yarn Client向YARN的ResourceManager申请启动Application Master。同时在SparkContent初始化中将创建DAGScheduler和TASKScheduler等,由于我们选择的是Yarn-Client模式,程序会选择YarnClientClu_spark的yarn模式