- 链接地址:https://blog.csdn.net/Fresh_man888/article/details/110297860
- 链接标题:Spark-Core之RDD的概述以及算子详解_对spark的rdd、算子的理解-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:3957
文章浏览阅读285次。一、RDD概述 1、什么是RDD RDD(Resilient Distributed Dataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。RDD具有数据流模型的特点:自动容错、位置感知性调度和可伸缩性。RDD允许用户在执行多个查询时显式地将工作集缓存在内存中,后续的查询能够重用工作集,这极大地提升了查询速度。 2、RDD属性 (1)、一组分片(Partition),即数据集的基..._对spark的rdd、算子的理解
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除