特牛生活网

spark入门1-运行wordCount_spark 自带worldcount提交命令-CSDN博客

网友收藏
文章浏览阅读721次。spark入门1-运行wordCount一、spark入门1、在idea中运行1.1 注意2、在Linux系统中运行2.1 用spark-shell运行2.2 用spark-submit运行3、在Spark自带的集群上运行3.1 配置集群的历史服务器3.2 注意4、在yarn上运行(重点)4.1 打通spark和yarn的历史服务器二、补充1.本文常用命令(方便粘贴)1.1 spark-submit2.端口一、spark入门1、在idea中运行先创建maven工程,pom文件导入下面的插件<_spark 自带worldcount提交命令