特牛网址导航

Spark 运行模式_node1:4040-CSDN博客

网友收藏
文章浏览阅读936次。部署Spark集群大体上分为两种模式:单机模式与集群模式大多数分布式框架都支持单机模式,方便开发者调试框架的运行环境。但是在生产环境中,并不会使用单机模式。因此,后续直接按照集群模式部署Spark集群。下面详细列举了Spark目前支持的部署模式。(1)Local模式:在本地部署单个Spark服务(2)Standalone模式:Spark自带的任务调度模式。(国内常用)(3)YARN模式:Spark使用Hadoop的YARN组件进行资源与任务调度。(国内常用)(4)Mesos模式:Spark使用M_node1:4040
标签:node1:4040