特牛网址导航

spark on yarn 运行流程_spark on yarn执行流程-CSDN博客

网友收藏
文章浏览阅读7.0k次,点赞9次,收藏37次。一、driver 运行在集群中(cluster模式) 1、client 向 yarn 提交一个job 2、ResouceManager 为该job在某个 NodeManager 上分配一个 ApplicationMaster,NM启动AppMaster,Appmaster 启动 driver 3、ApplicationMaster 启动后完成初始化作业,driver 生成一系列task 4..._spark on yarn执行流程