- 链接地址:https://blog.csdn.net/qq_41816516/article/details/121351070
- 链接标题:Spark(四): Spark 核心编程(上)_rdd的计算一个分区内的数据是一个一个执行逻辑,只有前面一个数据全部的逻辑执行完-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:3983
文章浏览阅读387次。文章目录Spark核心编程RDDRDD 核心属性RDD 执行原理RDD 基础编程RDD 创建RDD 并行度与分区RDD 转换算子Spark核心编程* Spark 计算框架为了能够进行高并发和高吞吐的数据处理,封装了三大数据结构,用于处理不同的应用场景。三大数据结构分别是: * RDD:弹性分布式数据集 * 累加器:分布式共享只写变量 * 广播变量:分布式共享只读变量RDDRDD(Resilient Distributed Dataset)叫做弹性分布式数据集,是 Spark 中最基本的数_rdd的计算一个分区内的数据是一个一个执行逻辑,只有前面一个数据全部的逻辑执行完
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除