特牛生活网

spark高可用集群搭建(stanalone)-CSDN博客

网友收藏
目录1.环境准备2.配置文件3.服务启动4.验证5.测试大体和非可用的搭建方式差不多,不同的是多了zookeeper集群,用来帮助spark实现高可用worker1,worker2,worker3上面部署zookeeper集群修改spark-env.sh,添加以下内容 export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER -Dspark.deploy.zookeeper.url=worker1:2181,worker2:21_spark高可用集群搭建