特牛生活网

Spark三大运行模式之Yarn 模式_spark3 sparksql yarn 模式-CSDN博客

网友收藏
一、模式概述Spark 客户端直接连接 Yarn,不需要额外构建 Spark 集群。有 yarnclient 和 yarn-cluster 两种模式,主要区别在于:Driver 程序的运行节点。yarn-client:Driver 程序运行在客户端,适用于交互、调试,希望立即看到 app 的输出yarn-cluster:Driver 程序运行在由 RM(ResourceManager)启动的 AP(APPMaster)适用于生产环境。运行模式图:二、安装使用(1)修改 hadoop 配_spark3 sparksql yarn 模式