特牛生活网

Spark HA高可用集群搭建_dspark.deploy.zookeeper.dir=/spark-ha-CSDN博客

网友收藏
文章浏览阅读170次。Standalone-HA(高可用) 原理: 单个主容易故障,一旦挂机就不可使用了 所以现在HA可以加一个Master,如果有两个Master的话,谁来运行,由zookeeper进行抉择操作: 停止spark集群 在master上配置 2.在node01上配置:修改spark-env.sh注释或删除MASTER_HOST内容:vim /export/serverlspark/conf/spark-env.sh# SPARK_MASTER_HOST=master_dspark.deploy.zookeeper.dir=/spark-ha