- 链接地址:https://blog.csdn.net/qq_43012693/article/details/109587064
- 链接标题:Spark文件保存到本地或HDFS:saveAsTextFile和saveAsObjectFile_spark saveasobjectfile-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:4124
文章浏览阅读7.3k次。scala版本: val rdd = sc.parallelize(1 to 10) rdd.saveAsTextFile("data1/save1")//保存在本地 //todo 保存在hdfs上 设置了两个分区,所以会有两个文件 rdd.saveAsTextFile("hdfs://hadoop01:9000/data/save/save1") //todo saveAsObjectFile 对于HDFS,默认采用SequenceFile保存。rdd.saveAsObje_spark saveasobjectfile
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除