特牛网址导航

spark本地模式和Standalone配置_spark standalone 指定每个work内存大小-CSDN博客

网友收藏
文章浏览阅读3.8k次。local模式非常适合作业的开发调试,配置也很简单,把编译好的文件解压,然后配置即可使用。使用自己编译产生的tgz压缩包 步骤: 前提:安装Scala(2.10.4)和JDK(1.7.x+) - 解压 ln -s spark-1.6.0-bin-2.5.0/ spark - 修改相关参数 到/spark/conf目录下修改文件 vim spark-env.sh_spark standalone 指定每个work内存大小