特牛网址导航

Spark 十大常用的 RDD API (适合小白)_spark rdd api-CSDN博客

网友收藏
文章浏览阅读3.8k次。0. RDD是什么?RDD是Spark中的抽象数据结构类型,任何数据在Spark中都被表示为RDD。从编程的角度来看,RDD可以简单看成是一个数组。和普通数组的区别是,RDD中的数据是分区存储的,这样不同分区的数据就可以分布在不同的机器上,同时可以被并行处理。因此,Spark应用程序所做的无非是把需要处理的数据转换为RDD,然后对RDD进行一系列的变换和操作从而得到结果。1.创建RDD(主要使用以下_spark rdd api
标签:spark rdd api