特牛网址导航

spark保存计算结果_spark分类后的保存办法-CSDN博客

网友收藏
文章浏览阅读1.1k次。4.数据读取与保存  Spark 的数据读取及数据保存可以从两个维度来作区分:文件格式以及文件系统。文件格式分为:Text 文件、Json 文件、Csv 文件、Sequence 文件以及 Object 文件;文件系统分为:本地文件系统、HDFS、HBASE以及数据库。1)数据读取:textFile(String)scala> val hdfsFile = sc.textFile("hdfs://hadoop102:9000/fruit.txt")hdf..._spark分类后的保存办法