特牛生活网

Spark3 Standalone模式高可用分布式集群搭建(HA模式)_spark-3 standlone-CSDN博客

网友收藏
文章浏览阅读521次。十三、实现Spark集群的高可用搭建Spark Standalone集群是Master-Slaves架构的集群模式,和大部分的Master-Slaves结构集群一样,存在着Master单点故障的问题。这里基于zookeeper的Standby Masters(Standby Master with zookeeper)实现高可用。基本原理是通过zookeeper来选举一个Master,其他的Master处于Standby状态。将spark集群连接到同一个Zookeeper实例并启动多个Master,利用z_spark-3 standlone