特牛网址导航

Spark on YARN-CSDN博客

网友收藏
文章浏览阅读2.3w次,点赞11次,收藏78次。前言Spark 可以跑在很多集群上,比如跑在local上,跑在Standalone上,跑在Apache Mesos上,跑在Hadoop YARN上等等。不管你Spark跑在什么上面,它的代码都是一样的,区别只是–master的时候不一样。其中Spark on YARN是工作中或生产上用的非常多的一种运行模式。YARN产生背景以前没有YARN的时候,每个分布式框架都要跑在一个集群上面,比如说H..._spark on yarn
标签:spark on yarn