特牛网址导航

【Spark】运行原理_spark运行原理-CSDN博客

网友收藏
文章浏览阅读394次。Spark原理目录:一、总体介绍1.1 Spark集群组成1.2 逻辑执行图1.3 物理执行图二、逻辑执行图2.1 明确逻辑计划的边界2.2 RDD的生成2.3 RDD之间的依赖关系2.4 RDD之间的依赖关系 — 宽、窄依赖 2.5 窄依赖的类别三、物理执行图四、运行过程五、Spark shuffle原理一、总体介绍1.Spark集群组成:案例:class WordCounts { @Test def test: Unit ={ _spark运行原理