特牛网址导航

Spark on yarn的两种模式详解(这个很重要哦)_sparkonyarn两种模式-CSDN博客

网友收藏
文章浏览阅读1.6k次,点赞2次,收藏8次。简介: 当一个Spark应用提交到集群上运行时,应用架构包含了两个部分Driver Program(资源申请和调度Job执行)Executors(运行Job中Task任务和缓存数据),两个都是JVM Process进程1: Driver程序运行的位置可以通过–deploy-mode 来指定:明确: Driver指的是The process running the main() function of the application and creating the SparkContext运_sparkonyarn两种模式