【大数据】spark Yarn的使用（5） - Driver和Executor_yarn总是分配driver,但不分配excutor-CSDN博客

网友收藏2024-01-24 07:38

链接地址：https://blog.csdn.net/weixin_44704985/article/details/108156842
链接标题：【大数据】spark Yarn的使用（5） - Driver和Executor_yarn总是分配driver,但不分配excutor-CSDN博客
所属网站：blog.csdn.net
被收藏次数：8371

文章浏览阅读653次。在local模式下驱动程序driver就是执行了一个Spark Application的main函数和创建Spark Context的进程，它包含了这个application的全部代码。（在那台机器运行了应用的全部代码创建了sparkContext就是driver,以可以说是你提交代码运行的那台机器）Driver:使用Driver这一概念的分布式框架有很多，比如hive,Spark中的Driver即运行Application的main()函数，并且创建SparkContext，创建SparkConte_yarn总是分配driver,但不分配excutor

本文地址：https://tebull.com/detail/544118.html

标签：yarn总是分配driver 但不分配excutor