Spark master节点HA配置-CSDN博客

网友收藏2024-01-24 06:12

链接地址：https://blog.csdn.net/weixin_30485799/article/details/95029395
链接标题：Spark master节点HA配置-CSDN博客
所属网站：blog.csdn.net
被收藏次数：4653

文章浏览阅读549次。Spark master节点HA配置1、介绍Spark HA配置需要借助于Zookeeper实现，因此需要先搭建ZooKeeper集群。2、配置2.1 修改所有节点的spark-evn.sh文件在spark-env.sh文件添加如下环境变量：#需要将该条目注释掉#export SPARK_MASTER_IP=master1 #导入export SPARK_DAEMON_JAVA..._spark 参数配置,指定 spark slave 节点

本文地址：https://tebull.com/detail/541700.html

标签：spark 参数配置指定 spark slave 节点

上一篇：Spark的HA_spark 读取路径是多了个ha-CSDN博客！

下一篇：如何配置spark master的 HA_airflow中sparksubmitoperator如何修改master的配置-CSDN博客

友情链接申请要求：不违法不降权权重相当请联系QQ：737597453