特牛网址导航

spark-yarn提交任务_--master yarn-cluster-CSDN博客

网友收藏
文章浏览阅读536次。spark-yarn提交任务的几种方式1、Yarn模式两种提交任务方式1.1、yarn-client提交任务方式1.1.1 yarn-client执行流程1.2、yarn-cluster提交任务方式1.2.1 yarn-cluster执行流程1.3、ApplicationMaster作用1、Yarn模式两种提交任务方式1.yarn-client:用于测试,driver运行在本地客户端,负责调整application,会与yarn集群产生大量网络通信,网卡流量过大,导致网络阻塞i,可能会导致任务失败,好处_--master yarn-cluster