SparkHA高可用集群搭建_spark ha高可用集群搭建-CSDN博客

网站介绍:文章浏览阅读215次。1 Spark HA高可用模式部署如果设置master只有一个, 所以也可能单点故障问题。可以启动多个 master, 先启动的处于 Active 状态, 其他的都处于 Standby 状态。步骤1: 给 spark-env.sh 添加如下配置添加上如下内容:export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER -Dspark.deploy.zookeeper.url=master-1:2181,master-2:_spark ha高可用集群搭建