特牛网址导航

spark3.0.1 Standalone 集群搭建_spark cluster without hadoop 集群-CSDN博客

网友收藏
文章浏览阅读506次。本机已经安装好hadoop2.10.0Scala-2.12.12jdk1.8Standalone 集群是 Spark 自带的资源调度框架,支持分布式搭建,这里建议搭建 Standalone 节点数为 3 台,1 台 master 节点,2 台 worker 节点,这虚拟机中每台节点的内存至少给 2G 和 2 个 core,这样才能保证后期 Spark 基于 Standalone 的正常运行。搭建 Standalone 集群的步骤如下:1.登录spark官网下载spark安装包https://_spark cluster without hadoop 集群