特牛网址导航

Spark对于RDD的相关操作(Scala)_scala spark读取文件,用rdd 的一些聚合-CSDN博客

网友收藏
文章浏览阅读1.5k次。如果在IDEA中创建Maven项目,需要导入相关依赖,现在先不提供pom文件,后面再上传。依赖导入完成之后,创建Scala-object,启用RDD需要固定的前面几行代码(里面的设置不一定固定)val conf=new SparkConf() .setMaster("local") .setAppName("testRdd")val sc=new SparkCo..._scala spark读取文件,用rdd 的一些聚合