特牛生活网

Spark和Yarn的整合_spark 整合yarn-CSDN博客

网友收藏
文章浏览阅读1.9k次。文章目录为什么要和yarn整合停止spark集群删除node1和node2中所有spark文件开始整合增加hadoop配置文件地址往yarn提交任务需要的两个配置同步到其他节点,重启yarn为什么要和yarn整合在上一篇文章中我们提到了Spark的独立集群的搭建,但是在公里里面,一般不适用standalone模式,因为公司已经有了yarn,不需要再搞俩个资源管理框架了停止spark集群停止spark集群需要再spark的sibin目录下执行./stop-all.sh删除node1和node2_spark 整合yarn
标签:spark 整合yarn